---
title: "Bytespider : bloquer ou autoriser ce crawler IA · DotsAgent"
description: "Bytespider est exploité par ByteDance et répertorié sous entraînement. Découvrez son token robots.txt, s’il respecte les règles, sa liste d’adresses IP et comment le contrôler."
url: https://dotsagent.io/fr/agent-ready/bots/bytespider
---

ByteDance · Entraînement

# Qu’est-ce que Bytespider ?

Le crawler de ByteDance, répertorié par des registres communautaires comme servant à l’entraînement. ByteDance ne lui consacre aucune page officielle.

- **Token robots.txt**: `Bytespider`
- **Opérateur**: ByteDance
- **Objectif**: Entraînement
- **Respecte robots.txt**: L’opérateur indique que robots.txt peut ne pas s’appliquer, ou des signalements de la communauté indiquent que le bot l’ignore.
- **Documenté par l’opérateur**: Non. Le token n’est connu que grâce à des listes communautaires, comme ai.robots.txt.

Selon des signalements de la communauté, il ne respecte pas robots.txt.

## Bloquer Bytespider sur tout votre site

`robots.txt`

```
User-agent: Bytespider
Disallow: /
```

## L’autoriser, mais exclure les chemins privés

`robots.txt`

```
User-agent: Bytespider
Allow: /
Disallow: /admin/
```

[L’ajouter à un robots.txt dans le générateur →](https://dotsagent.io/fr/agent-ready/robots-txt)

## Sources

1. [github.com](https://github.com/ai-robots-txt/ai.robots.txt)/ai-robots-txt/ai.robots.txt

Référence indépendante pour les personnes qui créent des agents IA. Sans affiliation avec les fournisseurs cités.

© 2026 DotsAgent · Données vérifiées le 1 octobre 2026