Meta · Kullanıcı istekleri
meta-externalfetcher nedir?
Meta'nın ajan özellikleri de dâhil olmak üzere, kullanıcı isteği üzerine sayfaları getirir.
- robots.txt token'ı
meta-externalfetcher- Operatör
- Meta
- Amaç
- Kullanıcı istekleri
- robots.txt kurallarına uyar
- Hayır Operatör, robots.txt kurallarının geçerli olmayabileceğini belirtiyor veya topluluk bildirimlerine göre bot bu kuralları yok sayıyor.
- Operatör tarafından belgelenmiş
- Evet, operatörün kendi sayfalarında.
- Dokümantasyon
- developers.facebook.com
Meta, robots.txt kurallarını aşabileceğini söylüyor ve IP aralıkları yayımlamıyor. Bu nedenle engelleme seçenekleri kısıtlı.
meta-externalfetcher botunu tüm sitenizde engelleyin
User-agent: meta-externalfetcher
Disallow: /
İzin verin, ancak özel yolları engelleyin
User-agent: meta-externalfetcher
Allow: /
Disallow: /admin/
Bu bot, bir kişi veya onun adına hareket eden bir agent için sayfaları getirir. Bazı operatörler, bu tür isteklerde robots.txt kurallarının geçerli olmayabileceğini belirtiyor. Bu sizin için önemliyse yukarıdaki açıklamayı kontrol edin ve güvenlik duvarınızda kural uygulayın.
Meta tarafından sunulan diğer botlar
Oluşturucudaki robots.txt dosyasına ekleyin →