dotsagent.io
Ngôn ngữ:Tiếng Việt
Google · Huấn luyện

Google-Extended là gì?

Token điều khiển, không phải crawler: Googlebot thực hiện việc tải trang, còn Google-Extended quyết định liệu nội dung đó có thể được dùng để huấn luyện Gemini và làm dữ liệu nền hay không.

Token robots.txt
Google-Extended
Nhà vận hành
Google
Mục đích
Huấn luyện
Tuân theo robots.txt
Có Nhà vận hành cho biết bot này tuân thủ robots.txt.
Có tài liệu từ nhà vận hành
Có, trên các trang của chính nhà vận hành.
Tài liệu
developers.google.com

Token này không có user agent riêng, nên không bao giờ xuất hiện trong access log của bạn.

Chặn Google-Extended trên toàn bộ trang web

robots.txt
User-agent: Google-Extended
Disallow: /

Cho phép bot này, nhưng không cho truy cập các đường dẫn riêng tư

robots.txt
User-agent: Google-Extended
Allow: /
Disallow: /admin/

Các bot khác của Google

Thêm bot này vào robots.txt trong trình tạo →

Nguồn

  1. developers.google.com/search/docs/crawling-indexing/google-common-crawlers