dotsagent.io
Lingua:Italiano
Meta · Richieste degli utenti

Che cos'è meta-externalfetcher?

Recupera pagine su richiesta dell'utente, anche per le funzionalità di agente di Meta.

Token robots.txt
meta-externalfetcher
Operatore
Meta
Scopo
Richieste degli utenti
Rispetta robots.txt
No L'operatore dichiara che robots.txt potrebbe non essere applicabile, oppure le segnalazioni della community indicano che non lo rispetta.
Documentato dall'operatore
Sì, nelle pagine dell'operatore.
Documentazione
developers.facebook.com

Meta afferma che può ignorare robots.txt e non pubblica intervalli IP, quindi ci sono poche possibilità di bloccarlo.

Blocca meta-externalfetcher su tutto il sito

robots.txt
User-agent: meta-externalfetcher
Disallow: /

Consenti l'accesso, ma escludi i percorsi privati

robots.txt
User-agent: meta-externalfetcher
Allow: /
Disallow: /admin/

Questo bot recupera pagine per una persona o per un agent che agisce per suo conto. Diversi operatori dichiarano che robots.txt potrebbe non essere applicabile a queste richieste: controlla quindi l'indicazione qui sopra e, se necessario, applica il blocco al firewall.

Altri bot di Meta

Aggiungilo a robots.txt nel generatore →

Fonti

  1. developers.facebook.com/docs/sharing/webmasters/web-crawlers/