dotsagent.io
اللغة:العربية
Meta · البحث

ما هو meta-webindexer؟

زاحف Meta للبحث في Meta AI. يلتزم بملف robots.txt، ولا تنشر Meta نطاقات عناوين IP الخاصة به.

رمز robots.txt
meta-webindexer
المشغّل
Meta
الغرض
البحث
يلتزم بـ robots.txt
نعم يذكر المشغّل أن هذا البوت يلتزم بملف robots.txt.
موثّق من المشغّل
نعم، في صفحات المشغّل نفسه.
التوثيق
developers.facebook.com

احظر meta-webindexer من موقعك بالكامل

robots.txt
User-agent: meta-webindexer
Disallow: /

اسمح له، مع حجب المسارات الخاصة

robots.txt
User-agent: meta-webindexer
Allow: /
Disallow: /admin/

بوتات أخرى من Meta

أضِفه إلى ملف robots.txt في المولّد →

المصادر

  1. developers.facebook.com/docs/sharing/webmasters/web-crawlers/