dotsagent.io
اللغة:العربية
Anthropic · جلب المستخدم

ما هو Claude-User؟

يجلب صفحةً عندما يطلبها مستخدم Claude. وعلى خلاف معظم أدوات الجلب التي يفعّلها المستخدم، يلتزم هذا البوت بملف robots.txt؛ وتذكر Anthropic أن جميع بوتاتها تفعل ذلك.

رمز robots.txt
Claude-User
المشغّل
Anthropic
الغرض
جلب المستخدم
يلتزم بـ robots.txt
نعم يذكر المشغّل أن هذا البوت يلتزم بملف robots.txt.
موثّق من المشغّل
نعم، في صفحات المشغّل نفسه.
قائمة IP منشورة
claude.com/crawling/bots.json
التوثيق
support.claude.com

احظر Claude-User من موقعك بالكامل

robots.txt
User-agent: Claude-User
Disallow: /

اسمح له، مع حجب المسارات الخاصة

robots.txt
User-agent: Claude-User
Allow: /
Disallow: /admin/

يجلب هذا البوت الصفحات نيابةً عن شخص، أو عن وكيل يتصرف نيابةً عنه. يذكر عدد من المشغّلين أن ملف robots.txt قد لا ينطبق على هذه الطلبات؛ لذا تحقّق من السطر أعلاه، وطبّق الحظر على مستوى جدار الحماية إذا كان ذلك مهمًا.

بوتات أخرى من Anthropic

أضِفه إلى ملف robots.txt في المولّد →

المصادر

  1. support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-ca