Googlebot

Googlebot (google bot) là con bọ của Google, còn được gọi là spider. Googlebot dùng để thu thập thông tin website, giúp Google cập nhật thêm những chỉ mục mới và website mới.Googlebot sử dụng các thuật toán và bò vào website, thực hiện quá trình thu thập và tiếp nhận dữ liệu web. Nhờ vậy mà người dùng tìm kiếm được thông tin từ hàng tỷ website trên thế giới.Quá trình thực hiện:Googlebot bắt đầu với danh sách URL của web tạo ra từ quá trình thu thập trước đó và bổ sung sitemap dữ liệu được cung cấp bởi quản trị web.Khi Googlebot ghé thăm mỗi người trong số các trang web này phát hiện liên kết (SRC và HREF) trên mỗi trang và thêm chúng vào danh sách của các trang để thu thập dữ liệu. Các trang web mới, thay đổi các trang web đang hoạt động, các liên kết chết được ghi nhận và được sử dụng để cập nhật chỉ mục trên Google.Vì thế nên gonglebot không được sử dụng làm trình duyệt chính nhiều.