Applebot là gì?

Crawler của Apple dùng cho tìm kiếm trong Siri, Spotlight và Safari. Apple cho biết dữ liệu thu thập được có thể được dùng để hỗ trợ huấn luyện các model của Apple.

Token robots.txt

Applebot

Nhà vận hành

Apple

Mục đích

Tìm kiếm

Tuân theo robots.txt

●Có Nhà vận hành cho biết bot này tuân thủ robots.txt.

Có tài liệu từ nhà vận hành

Có, trên các trang của chính nhà vận hành.

Danh sách IP được công bố

search.developer.apple.com/applebot.json

Tài liệu

support.apple.com

Crawler này bỏ qua Crawl-delay. Nếu robots.txt không có nhóm Applebot, nó sẽ tuân theo các quy tắc dành cho Googlebot.

Chặn Applebot trên toàn bộ trang web

User-agent: Applebot
Disallow: /

Cho phép bot này, nhưng không cho truy cập các đường dẫn riêng tư

User-agent: Applebot
Allow: /
Disallow: /admin/

Các bot khác của Apple

Thêm bot này vào robots.txt trong trình tạo →