# Rastreo e indexación para tu tienda: ruta de lectura

> Ruta de lectura de rastreo e indexación para tiendas online: de robots.txt a los bots de IA y los archivos para agentes, en el orden en que se entiende.

URL: https://clione.ai/es/aprender/rastreo-e-indexacion/
Lang: es

Primero quién lee y qué pide, después qué le dices sobre cada URL, luego quién es cada bot y al final lo que se publica pensando en agentes: cuando llegues a los bots de IA, ya sabrás qué puede y qué no puede pedirles un archivo. La ruta tiene cinco tramos.

1. **Pasos 1 a 6 · Cómo lee la web un buscador.** El [rastreador](/es/glosario/rastreador/), la [indexación](/es/glosario/indexacion/) y la [diferencia entre los dos](/es/glosario/rastreo-vs-indexacion/). Después, las dos herramientas básicas del sitio: [robots.txt](/es/glosario/robots-txt/), con el [_user agent_](/es/glosario/user-agent/) con el que cada bot se identifica, y el [sitemap XML](/es/glosario/sitemap-xml/).
2. **Pasos 7 a 14 · Qué página cuenta y cuántas se visitan.** Las señales con las que eliges qué se indexa y bajo qué URL: [noindex](/es/glosario/noindex/), [canonical](/es/glosario/canonical/), el [contenido duplicado](/es/glosario/contenido-duplicado/), la [redirección 301](/es/glosario/redireccion-301/), [hreflang](/es/glosario/hreflang/) y el [enlazado interno](/es/glosario/enlazado-interno/). Cierran dos términos de tiendas grandes: la [navegación facetada](/es/glosario/navegacion-facetada/), que multiplica las URL, y el [presupuesto de rastreo](/es/glosario/presupuesto-de-rastreo/).
3. **Pasos 15 a 23 · Quién rastrea tu tienda.** Los rastreadores de los buscadores, [Googlebot](/es/glosario/googlebot/) y [Bingbot](/es/glosario/bingbot/), y los de las empresas de IA, cada uno con su función: [GPTBot](/es/glosario/gptbot/), [OAI-SearchBot](/es/glosario/oai-searchbot/), [ChatGPT-User](/es/glosario/chatgpt-user/), [PerplexityBot](/es/glosario/perplexitybot/) y [ClaudeBot](/es/glosario/claudebot/). Cierran los dos controles de Google para su IA: [Google-Extended](/es/glosario/google-extended/) y el [control de IA generativa](/es/glosario/control-ia-generativa-search-console/) de [Search Console](/es/glosario/search-console/).
4. **Pasos 24 a 28 · Abrir o cerrar la puerta.** El [bloqueo de bots de IA](/es/glosario/bloqueo-de-bots-de-ia/) y lo que decide la capa de red: la [caché y la CDN](/es/glosario/cache-cdn-bots/), la firma de los bots con [Web Bot Auth](/es/glosario/web-bot-auth/) y el cobro por visita con [pay per crawl](/es/glosario/pay-per-crawl/). Cierra [IndexNow](/es/glosario/indexnow/), el aviso de que una URL ha cambiado.
5. **Pasos 29 a 35 · Para agentes, y una medida aparte.** Los archivos y las respuestas que se ofrecen a la IA: [llms.txt](/es/glosario/llms-txt/), [agents.md](/es/glosario/agents-md/), el [Markdown para agentes](/es/glosario/markdown-para-agentes/), la [negociación de contenido](/es/glosario/negociacion-de-contenido/) que lo sirve, el [header Link](/es/glosario/link-header/) y el directorio [`.well-known`](/es/glosario/well-known/). El último, las [Core Web Vitals](/es/glosario/core-web-vitals/), no trata de quién entra sino de cómo se carga la página, y se queda aquí por ser lo que más se confunde con el rastreo.

Es una de las [siete rutas de lectura](/es/aprender/). Conviene leerla después de [la ruta sobre la IA en los buscadores](/es/aprender/busqueda-con-ia/) si aún no sabes para qué te visitan los bots de las empresas de IA.