---
title: "Diffbot: bloquear o permitir este rastreador de IA · DotsAgent"
description: "Diffbot está a cargo de Diffbot y figura con el propósito búsqueda. Su token de robots.txt, si respeta las reglas, su lista de IP y cómo controlarlo."
url: https://dotsagent.io/es/agent-ready/bots/diffbot
---

Diffbot · Búsqueda

# ¿Qué es Diffbot?

Crawler de Diffbot para extraer datos y alimentar su grafo de conocimiento. El token aparece en listas comunitarias, no en la documentación de Diffbot.

- **Token de robots.txt**: `Diffbot`
- **Operador**: Diffbot
- **Propósito**: Búsqueda
- **Respeta robots.txt**: El operador no se pronuncia.
- **Documentado por el operador**: No. El token solo se conoce por listas de la comunidad, como ai.robots.txt.

Según fuentes comunitarias, que respete robots.txt depende de los propios usuarios de Diffbot.

## Bloquea Diffbot en todo tu sitio

`robots.txt`

```
User-agent: Diffbot
Disallow: /
```

## Permítelo, pero excluye las rutas privadas

`robots.txt`

```
User-agent: Diffbot
Allow: /
Disallow: /admin/
```

[Añádelo a un robots.txt en el generador →](https://dotsagent.io/es/agent-ready/robots-txt)

## Fuentes

1. [github.com](https://github.com/ai-robots-txt/ai.robots.txt)/ai-robots-txt/ai.robots.txt

Referencia independiente para quienes crean agentes de IA. No estamos afiliados a ninguno de los proveedores mencionados aquí.

© 2026 DotsAgent · Datos verificados el 1 de octubre de 2026
