dotsagent.io
Langue:Français
Anthropic · Requêtes utilisateur

Qu’est-ce que Claude-User ?

Récupère une page à la demande d’un utilisateur de Claude. Contrairement à la plupart des bots qui récupèrent des pages à la demande des utilisateurs, il respecte robots.txt ; Anthropic indique que tous ses bots le font.

Token robots.txt
Claude-User
Opérateur
Anthropic
Objectif
Requêtes utilisateur
Respecte robots.txt
Oui L’opérateur indique que le bot respecte robots.txt.
Documenté par l’opérateur
Oui, sur les pages de l’opérateur.
Liste d’adresses IP publiée
claude.com/crawling/bots.json
Documentation
support.claude.com

Bloquer Claude-User sur tout votre site

robots.txt
User-agent: Claude-User
Disallow: /

L’autoriser, mais exclure les chemins privés

robots.txt
User-agent: Claude-User
Allow: /
Disallow: /admin/

Ce bot récupère des pages pour une personne ou pour un agent agissant en son nom. Plusieurs opérateurs indiquent que robots.txt peut ne pas s’appliquer à ces requêtes. Vérifiez donc l’indication ci-dessus et bloquez-le au niveau de votre pare-feu si nécessaire.

Autres bots de Anthropic

L’ajouter à un robots.txt dans le générateur →

Sources

  1. support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-ca