---
title: "Diffbot: blocca o consenti questo crawler IA · DotsAgent"
description: "Diffbot è gestito da Diffbot ed è classificato come ricerca. Il token robots.txt, il rispetto delle regole, l'elenco IP e le modalità per controllarlo."
url: https://dotsagent.io/it/agent-ready/bots/diffbot
---

Diffbot · Ricerca

# Che cos'è Diffbot?

Crawler di Diffbot per l'estrazione dei dati e il suo knowledge graph. Il token proviene dagli elenchi della community, non dalla documentazione ufficiale di Diffbot.

- **Token robots.txt**: `Diffbot`
- **Operatore**: Diffbot
- **Scopo**: Ricerca
- **Rispetta robots.txt**: L'operatore non fornisce indicazioni.
- **Documentato dall'operatore**: No. Il token è noto solo da elenchi della community, come ai.robots.txt.

Secondo le fonti della community, il rispetto di robots.txt dipende dagli utenti di Diffbot.

## Blocca Diffbot su tutto il sito

`robots.txt`

```
User-agent: Diffbot
Disallow: /
```

## Consenti l'accesso, ma escludi i percorsi privati

`robots.txt`

```
User-agent: Diffbot
Allow: /
Disallow: /admin/
```

[Aggiungilo a robots.txt nel generatore →](https://dotsagent.io/it/agent-ready/robots-txt)

## Fonti

1. [github.com](https://github.com/ai-robots-txt/ai.robots.txt)/ai-robots-txt/ai.robots.txt

Riferimento indipendente per chi sviluppa agenti IA. Non siamo affiliati a nessun fornitore citato qui.

© 2026 DotsAgent · Dati verificati il 1 ottobre 2026