Meta · Ophalen door gebruikers
Wat is facebookexternalhit?
Haalt pagina's op om linkvoorbeelden te maken wanneer iemand een URL deelt in apps van Meta.
- robots.txt-token
facebookexternalhit- Operator
- Meta
- Doel
- Ophalen door gebruikers
- Volgt robots.txt
- Nee De beheerder zegt dat robots.txt mogelijk niet van toepassing is, of uit meldingen van de community blijkt dat deze het negeert.
- Gedocumenteerd door operator
- Ja, op de eigen pagina's van de beheerder.
- Documentatie
- developers.facebook.com
Volgens Meta kan deze crawler robots.txt omzeilen voor integriteits- en beveiligingscontroles.
Blokkeer facebookexternalhit op je hele site
User-agent: facebookexternalhit
Disallow: /
Sta deze toe, maar sluit privé-paden uit
User-agent: facebookexternalhit
Allow: /
Disallow: /admin/
Deze bot haalt pagina's op voor een persoon of voor een agent die namens iemand handelt. Verschillende beheerders zeggen dat robots.txt mogelijk niet van toepassing is op zulke verzoeken. Controleer daarom de regel hierboven en blokkeer de bot op je firewall als dat belangrijk is.
Andere bots van Meta
Voeg deze toe aan een robots.txt in de generator →