meta-externalagent nedir?

Meta'nın AI modellerini eğitmek ve sayfaları dizine eklemek için kullandığı crawler. robots.txt kurallarına uyar.

robots.txt token'ı

meta-externalagent

Operatör

Meta

Amaç

Eğitim

robots.txt kurallarına uyar

●Evet Operatör, robots.txt kurallarına uyduğunu belirtiyor.

Operatör tarafından belgelenmiş

Evet, operatörün kendi sayfalarında.

Dokümantasyon

developers.facebook.com

Her iki amaç için de aynı token kullanılır. Bu nedenle eğitim için engellerseniz dizine eklemeyi de durdurursunuz. Meta IP aralıklarını yayımlamıyor.

meta-externalagent botunu tüm sitenizde engelleyin

User-agent: meta-externalagent
Disallow: /

İzin verin, ancak özel yolları engelleyin

User-agent: meta-externalagent
Allow: /
Disallow: /admin/

Meta tarafından sunulan diğer botlar

Oluşturucudaki robots.txt dosyasına ekleyin →