Bài viết liên quan đến từ khóa spider
2009-01-02 11:03:31
Web crawler, web spider hay web robot là một chương trình tự động tìm kiếm trên Internet. Nó được thiết kết để thu thập tài nguyên Internet (trang Web, hình ảnh, video, tài liệu Word, PDF hay PostScrips) , cho phép máy tìm kiếm đánh chỉ số sau đó.Cùng phương thức, nhưng một số robots lại bị sử dụng để lượm các tài nguyên hoặc để lọc địa chỉ email.
Để đánh chỉ số các tài nguyên Web, mỗi robot sẽ đi theo các liên kết mà nó tìm thấy tại một trang trung tâm. Sau đó, mỗi trang đã duyệt sẽ được ghi nhớ lại và gán cho tần số đánh lại chỉ số dựa vào mức độ cập nhật thường xuyên hay không của trang.
2009-03-11 16:53:24
Không ai là không mắc lỗi và tất nhiên kể cả Google hay các search engine khác. Bạn luôn nghĩ là spider của google vẫn luôn lùng sục khắp website của bạn và đánh chỉ mục cho từng nội dung, dù là nhỏ nhất, sự thật không phải như vậy googlebot cũng đôi khi có chút trục trặc hay chút khó tính mà ko crawl cũng như index 1 phần nào đó trong website của bạn. Điều này quả thật là quá thiệt thòi cho các webmaster trong việc làm SEO (quang ba web), vậy vấn đề ở đây là cần phát hiện ra những phần đó và bắt google crawl lại và index phần mục đó.
Hiện có 2 bài viết liên quan đến từ khóa spider. Bạn có thể xem tất cả từ khóa ở Tag Cloud














