# Qué es ClaudeBot, el rastreador de Anthropic

> Qué es ClaudeBot, el rastreador con el que Anthropic recoge contenido para entrenar a Claude, qué cambia si lo bloqueas y cómo verificar sus visitas.

URL: https://clione.ai/es/glosario/claudebot/
Lang: es

ClaudeBot no es Claude, el asistente, ni una función de él: es el [rastreador](/es/glosario/rastreador/) con el que Anthropic recorre la web para reunir contenido con el que mejorar sus modelos. Para una tienda, el nombre suele aparecer de dos maneras: en una lista de «bots de IA» que alguien propone bloquear, o en los registros del servidor, a veces con muchas peticiones seguidas. En los dos casos la pregunta útil es la misma: **qué deja de pasar si le cierras la puerta, y qué sigue pasando aunque se la cierres**.

## Cómo funciona

Anthropic usa tres agentes, cada uno con su trabajo, y los describe en una sola página de ayuda, actualizada el 7 de abril de 2026:[^anthropic-bots]

| Agente           | Para qué lo usa Anthropic                                                                           | Qué pasa si lo bloqueas                                                                                                         |
| ---------------- | --------------------------------------------------------------------------------------------------- | ------------------------------------------------------------------------------------------------------------------------------- |
| ClaudeBot        | Recoger contenido de la web para mejorar la utilidad y la seguridad de sus modelos de IA generativa | El sitio indica que su contenido futuro debe quedar fuera de los datos de entrenamiento                                         |
| Claude-SearchBot | Recorrer la web para mejorar la calidad de los resultados de búsqueda                               | Claude no indexa tu contenido para la búsqueda, lo que **puede reducir tu visibilidad** y la exactitud de lo que muestra        |
| Claude-User      | Visitar una web cuando una persona hace una pregunta en Claude                                      | Claude no puede recuperar tu contenido para responder, lo que puede reducir tu visibilidad en las búsquedas que pide el usuario |

La consecuencia práctica es la misma que en OpenAI, donde [GPTBot](/es/glosario/gptbot/) rastrea para entrenar y [OAI-SearchBot](/es/glosario/oai-searchbot/) para la búsqueda:[^openai-bots] **entrenamiento y visibilidad se deciden por separado**. Bloquear ClaudeBot afecta a lo primero; para lo segundo cuentan los otros dos.

Anthropic afirma que sus bots respetan las señales de «no rastrear» siguiendo las directivas estándar de [robots.txt](/es/glosario/robots-txt/), y pone el ejemplo de cómo cerrar todo el sitio a ClaudeBot con un grupo propio y `Disallow: /`. Pide repetirlo **en cada subdominio** que quieras excluir, porque cada uno tiene su propio archivo. Y añade dos cosas que no todos los rastreadores hacen: admite la directiva `Crawl-delay`, que no forma parte del estándar, para pedir que espacie sus visitas, y dice que **no intentará saltarse los CAPTCHA** de los sitios que rastrea.[^anthropic-bots]

Lo que desaconseja es bloquear por IP. Según Anthropic, otros métodos, como bloquear direcciones IP, pueden no funcionar bien ni garantizar la exclusión de forma duradera, **porque le impiden leer tu robots.txt**.[^anthropic-bots] Si ClaudeBot no puede leer el archivo, tampoco puede leer tu `Disallow`.

Para comprobar si una visita es suya, Anthropic publica los rangos de IP de sus bots en `claude.com/crawling/bots.json`: si un rastreador sale de una dirección de esa lista, viene de Anthropic.[^anthropic-bots] La versión que leímos el 6 de octubre de 2026 tenía fecha del 2 de octubre de 2026 y 28 prefijos IPv4.[^anthropic-ips] **La lista es una para todos sus bots**, así que confirma que la visita es de Anthropic, y el nombre del [_user agent_](/es/glosario/user-agent/) dice cuál de los tres es.

Google no tiene un equivalente directo con visitas propias. Su control para el entrenamiento de [Gemini](/es/glosario/gemini/), [Google-Extended](/es/glosario/google-extended/), es un nombre que solo existe en robots.txt: el rastreo lo hacen los agentes de siempre de Google, y Google dice que no afecta a la inclusión del sitio en la Búsqueda.[^google-common-crawlers] Con ClaudeBot sí verás peticiones en tus registros.

## En una tienda

Una tienda de material de escalada quiere que su catálogo no se use para entrenar modelos, pero sí aparecer cuando alguien le pregunta a Claude por un arnés. Es un **ejemplo ficticio**. Su robots.txt:

```text
User-agent: *
Disallow: /cart
Disallow: /checkout
Disallow: /collections/*sort_by*

User-agent: ClaudeBot
Disallow: /
```

ClaudeBot encuentra su grupo y no puede pedir nada. Claude-SearchBot y Claude-User no tienen grupo propio, así que siguen el del asterisco: pueden pedir las fichas, pero no el carrito, el checkout ni las colecciones reordenadas. El estándar manda que cada rastreador busque el grupo que lo nombra y, solo si no lo encuentra, obedezca el del asterisco.[^rfc9309]

Otra tienda no quiere cerrar la puerta, sino que ClaudeBot pida menos páginas por minuto. Si le da un grupo propio para eso, tiene que repetir dentro las reglas generales, porque **un rastreador que encuentra su grupo deja de leer el del asterisco**:[^rfc9309]

```text
User-agent: ClaudeBot
Crawl-delay: 1
Disallow: /cart
Disallow: /checkout
Disallow: /collections/*sort_by*
```

Sin esas tres líneas, el `Crawl-delay` le abriría a ClaudeBot el carrito y las colecciones reordenadas.


**Bloquear ClaudeBot no te saca de Claude, y bloquear «todo lo de Anthropic» sí puede hacerlo.** ClaudeBot es el agente del entrenamiento. Si en la misma lista caen Claude-SearchBot y Claude-User, Anthropic avisa de que eso **puede reducir tu visibilidad** en los resultados de búsqueda de Claude y en las respuestas a las preguntas de sus usuarios.[^anthropic-bots] Antes de copiar una lista de bots de IA, mira qué nombres trae.


## Cómo comprobarlo

1. **Abre `tudominio.com/robots.txt` y busca los tres nombres de Anthropic.** Si ninguno tiene grupo, les toca el del asterisco.[^rfc9309] Haz lo mismo en cada subdominio que sirva páginas.[^anthropic-bots]
2. **Si ClaudeBot tiene un grupo propio, comprueba que repite tus reglas generales** (carrito, checkout, colecciones filtradas), porque no las hereda.[^rfc9309]
3. **Busca ClaudeBot, Claude-SearchBot y Claude-User en los registros** de tu servidor o de tu CDN, y cuenta las peticiones de cada uno por separado.
4. **Contrasta cada IP con `claude.com/crawling/bots.json`** el mismo día. Una IP fuera de la lista no es de las que Anthropic declara para sus bots.[^anthropic-bots]
5. **Si hay un bloqueo por IP en el cortafuegos, revísalo**: Anthropic advierte de que puede impedirle leer tu robots.txt y no garantizar la exclusión.[^anthropic-bots]

## Concepto cercano: GPTBot

GPTBot es el equivalente de OpenAI: rastrea contenido que puede usarse para entrenar sus modelos fundacionales, y bloquearlo indica que el contenido del sitio no debe usarse en ese entrenamiento.[^openai-bots] Los dos dejan la búsqueda a otro agente, OAI-SearchBot en OpenAI y Claude-SearchBot en Anthropic, y los dos tienen al lado un agente para las peticiones de una persona: [ChatGPT-User](/es/glosario/chatgpt-user/) y Claude-User.[^openai-bots][^anthropic-bots] La diferencia está en ese tercer agente. OpenAI avisa de que, a las visitas de ChatGPT-User, **robots.txt puede no aplicarse**;[^openai-bots] Anthropic dice que sus bots respetan robots.txt y que bloquear Claude-User tiene un coste en visibilidad.[^anthropic-bots] Si tu robots.txt ya trata a GPTBot, trata a ClaudeBot igual y con su propio nombre: **una regla para uno no vale para el otro**.

Para seguir, la guía de [lo que ve un rastreador de IA en tu tienda](/es/guias/que-ve-un-rastreador-de-ia/) recorre agente por agente qué lee cada uno, y la [ruta de lectura](/es/aprender/rastreo-e-indexacion/) de este tema ordena el resto de términos.