dotsagent.io
Idioma:Español
Anthropic · Solicitudes de usuarios

¿Qué es Claude-User?

Obtiene una página cuando lo solicita un usuario de Claude. A diferencia de la mayoría de los rastreadores activados por usuarios, respeta robots.txt; Anthropic indica que todos sus bots lo hacen.

Token de robots.txt
Claude-User
Operador
Anthropic
Propósito
Solicitudes de usuarios
Respeta robots.txt
Sí El operador indica que respeta robots.txt.
Documentado por el operador
Sí, en las páginas oficiales del operador.
Lista de IP publicada
claude.com/crawling/bots.json
Documentación
support.claude.com

Bloquea Claude-User en todo tu sitio

robots.txt
User-agent: Claude-User
Disallow: /

Permítelo, pero excluye las rutas privadas

robots.txt
User-agent: Claude-User
Allow: /
Disallow: /admin/

Este bot obtiene páginas para una persona o para un agente que actúa en su nombre. Varios operadores indican que robots.txt podría no aplicarse a estas solicitudes, así que comprueba la información anterior y aplícalo en tu firewall si es importante.

Otros bots de Anthropic

Añádelo a un robots.txt en el generador →

Fuentes

  1. support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-ca