---
title: "Diffbot：このAIクローラーをブロックまたは許可する · DotsAgent"
description: "DiffbotはDiffbotが運営し、検索に分類されています。robots.txtトークン、ルールへの準拠状況、IPリスト、制御方法を紹介します。"
url: https://dotsagent.io/ja/agent-ready/bots/diffbot
---

Diffbot · 検索

# Diffbotとは？

データ抽出とナレッジグラフの構築に使われるDiffbotのクローラーです。このトークンはDiffbotの公式ドキュメントではなく、コミュニティのリストに掲載されています。

- **robots.txtトークン**: `Diffbot`
- **運営者**: Diffbot
- **用途**: 検索
- **robots.txtへの準拠**: 運営者からの説明はありません。
- **運営者によるドキュメント**: いいえ。ai.robots.txt などのコミュニティのリストでのみ確認できます。

コミュニティの情報によると、robots.txtを尊重するかどうかはDiffbotのユーザーによって異なります。

## サイト全体で Diffbot をブロックする

`robots.txt`

```
User-agent: Diffbot
Disallow: /
```

## 許可しつつ、非公開パスへのアクセスを防ぐ

`robots.txt`

```
User-agent: Diffbot
Allow: /
Disallow: /admin/
```

[ジェネレーターで robots.txt に追加 →](https://dotsagent.io/ja/agent-ready/robots-txt)

## 出典

1. [github.com](https://github.com/ai-robots-txt/ai.robots.txt)/ai-robots-txt/ai.robots.txt

AIエージェント開発者向けの独立したリファレンスです。ここに記載されているいずれのベンダーとも提携していません。

© 2026 DotsAgent · 確認日: 2026年10月1日