---
title: "Diffbot: i-block o payagan ang AI crawler na ito · DotsAgent"
description: "Pinapatakbo ng Diffbot ang Diffbot, na nakalista sa ilalim ng paghahanap. Alamin ang robots.txt token nito, kung sumusunod ito sa mga patakaran, ang IP list nito at kung paano ito kontrolin."
url: https://dotsagent.io/fil/agent-ready/bots/diffbot
---

Diffbot · Paghahanap

# Ano ang Diffbot?

Crawler ng Diffbot para sa pagkuha ng data at pagbuo ng knowledge graph nito. Nagmula ang token sa mga community list, hindi sa sariling docs ng Diffbot.

- **robots.txt token**: `Diffbot`
- **Operator**: Diffbot
- **Layunin**: Paghahanap
- **Sumusunod sa robots.txt**: Walang sinabi ang operator.
- **May dokumentasyon mula sa operator**: Hindi. Sa mga listahan ng komunidad lang nakilala ang token na ito, gaya ng ai.robots.txt.

Ayon sa mga source ng komunidad, nakadepende sa mga user mismo ng Diffbot kung sinusunod nito ang robots.txt.

## I-block ang Diffbot sa buong site mo

`robots.txt`

```
User-agent: Diffbot
Disallow: /
```

## Payagan ito, pero ilayo sa mga pribadong path

`robots.txt`

```
User-agent: Diffbot
Allow: /
Disallow: /admin/
```

[Idagdag ito sa robots.txt sa generator →](https://dotsagent.io/fil/agent-ready/robots-txt)

## Mga source

1. [github.com](https://github.com/ai-robots-txt/ai.robots.txt)/ai-robots-txt/ai.robots.txt

Independent na sanggunian para sa mga gumagawa ng AI agent. Hindi kami kaanib ng alinman sa mga vendor na nakalista rito.

© 2026 DotsAgent · Sinuri ang mga detalye noong Oktubre 1, 2026