Respuesta corta: Casi todas las empresas de IA usan bots de tres tipos: unos recogen contenido para entrenar, otros crean el índice de las respuestas de búsqueda con IA y otros abren una página porque una persona hizo una pregunta. Cada uno tiene su nombre en el robots.txt, así que puedes permitirlos o bloquearlos uno a uno.
Bots de entrenamiento, de búsqueda y de usuario
| Empresa | Entrenamiento | Búsqueda | A petición de una persona |
|---|---|---|---|
| OpenAI | GPTBot | OAI-SearchBot | ChatGPT-User |
| Anthropic | ClaudeBot | Claude-SearchBot | Claude-User |
| Perplexity | Ninguno, según dice | PerplexityBot | Perplexity-User |
| Token Google-Extended | Googlebot | Ninguno listado | |
| Apple | Token Applebot-Extended | Applebot | Ninguno listado |
Según la página de cada empresa sobre sus bots, consultada el 4 de noviembre de 2026. Un token es un nombre para el robots.txt, no un rastreador aparte. OpenAI también usa OAI-AdsBot, que solo visita las páginas enviadas como anuncios en ChatGPT.
OpenAI dice que sus ajustes son independientes: una web puede permitir OAI-SearchBot para aparecer en la búsqueda de ChatGPT y bloquear GPTBot, lo que indica que su contenido no debe usarse para entrenar.
Cómo los controla el robots.txt
Los rastreadores leen el robots.txt. Anthropic dice que sus bots lo respetan, y OpenAI y Perplexity dicen que un cambio puede tardar hasta un día en aplicarse.
Los bots que actúan a petición de una persona son distintos. OpenAI dice que las reglas del robots.txt pueden no aplicarse a ChatGPT-User, que no decide qué aparece en la búsqueda, y Perplexity dice que Perplexity-User suele ignorarlas.
Google-Extended y Applebot-Extended no rastrean nada por sí mismos. Google-Extended le dice a Google si el contenido que rastrea puede entrenar Gemini o sostener sus respuestas; Applebot-Extended le dice a Apple si puede entrenar sus modelos. Google dice que su token no afecta a la inclusión en la Búsqueda, y Apple pide la metaetiqueta nosnippet para dejar contenido fuera de sus respuestas con IA.
Nuestra guía del archivo robots.txt explica el archivo, y nuestra guía de llms.txt cubre el otro archivo que algunas webs añaden para las herramientas de IA.
Cómo decidir qué bots de IA permitir
- Decide qué quieres: aparecer en respuestas de IA, que te usen para entrenar, las dos cosas o ninguna.
- Abre tu robots.txt y busca grupos que nombren bots de IA.
- Para aparecer en la búsqueda de ChatGPT, permite OAI-SearchBot; para quedar fuera del entrenamiento, bloquea GPTBot.
- Repite con cada empresa: ClaudeBot y Claude-SearchBot, PerplexityBot, Google-Extended, Applebot-Extended.
- Si un cortafuegos bloquea bots, permite los rangos de IP que las empresas publican para los bots que quieres.
- Espera un día y comprueba que el cambio se aplicó.
- Mira los registros de tu servidor para ver qué bots te visitan de verdad, y compáralos con los rangos publicados.
Cómo distinguir un bot de IA real de uno falso
Cualquiera puede copiar el nombre de un bot en una petición. OpenAI, Anthropic, Perplexity, Apple y Google publican las direcciones IP que usan sus bots, así que puedes comprobar si una visita viene de verdad de ellos.
OpenAI y Perplexity recomiendan permitir esos rangos si quieres aparecer en sus resultados de búsqueda. Anthropic advierte que bloquear sus direcciones puede no servir para excluirte, porque entonces sus bots no pueden leer tu robots.txt.
Qué bots de IA visitaron nuestra web
Revisamos los registros de nuestro servidor del 24 de octubre al 4 de noviembre de 2026 buscando estos nombres. ClaudeBot, PerplexityBot, OAI-SearchBot y ChatGPT-User nos visitaron a menudo, aunque menos que Googlebot. GPTBot, el rastreador de entrenamiento, vino mucho menos.
Nuestro robots.txt no nombra ningún bot de IA, así que todos pueden rastrear la web.
Después comparamos las direcciones con los rangos que publican OpenAI y Perplexity. La mayoría de las peticiones de OAI-SearchBot y PerplexityBot coincidían. La mayoría de las que se presentaban como GPTBot no, y ninguna de las que se presentaban como Perplexity-User.
Así que los nombres de un registro son un punto de partida, no una prueba. Solo contamos una visita como bot de IA real cuando su dirección coincide con la lista publicada.
Antes de cambiar tu robots.txt por la IA
- Sabes en qué respuestas de IA quieres aparecer.
- Los bots de búsqueda que quieres están permitidos, como OAI-SearchBot.
- Los bots de entrenamiento están permitidos o bloqueados a propósito, no por descuido.
- Google-Extended y Applebot-Extended están como quieres.
- Tu cortafuegos no bloquea los rangos de IP publicados.
- Revisas tus registros con esos rangos, no solo con los nombres de los bots.
RecuerdaBloquear un bot de entrenamiento no te oculta de la búsqueda con IA, y bloquear uno de búsqueda sí. Decide bot por bot.
La búsqueda con IA es parte de nuestro trabajo de SEO, junto con el SEO local y el técnico.
Respuestas rápidas sobre los rastreadores de IA
¿Qué es un rastreador de IA?
Un bot que una empresa de IA envía a leer páginas web. Algunos recogen contenido que puede entrenar modelos y otros crean el índice de las respuestas de búsqueda con IA. Otros abren una página porque una persona le hizo una pregunta al chatbot.
¿Bloquear GPTBot saca mi web de ChatGPT?
No. OpenAI trata cada bot por separado: GPTBot es para el entrenamiento y OAI-SearchBot para la búsqueda. Una web puede bloquear GPTBot y seguir apareciendo en las respuestas de búsqueda de ChatGPT, siempre que permita OAI-SearchBot.
¿Google-Extended afecta a la Búsqueda de Google?
No. Google-Extended es un token del robots.txt, no un rastreador aparte. Decide si el contenido que rastrea Google puede entrenar Gemini o sostener sus respuestas, y Google dice que no afecta a la inclusión en la Búsqueda.
¿Qué es ClaudeBot?
El rastreador de Anthropic para contenido que puede usarse en el entrenamiento de sus modelos. Anthropic también usa Claude-SearchBot para los resultados de búsqueda y Claude-User, que abre páginas cuando alguien le pregunta algo a Claude.
¿Puede un bot ignorar el robots.txt?
Los bots que actúan a petición de una persona pueden hacerlo. OpenAI dice que las reglas del robots.txt pueden no aplicarse a ChatGPT-User, y Perplexity dice que Perplexity-User suele ignorarlas. Sus rastreadores sí las siguen.
Fuentes
Consultadas el 4 de noviembre de 2026. OpenAI, en inglés: Overview of OpenAI Crawlers. Anthropic, en inglés: Does Anthropic crawl data from the web, and how can site owners block the crawler? Perplexity, en inglés: Perplexity Crawlers. Apple, en inglés: About Applebot. Google: Rastreadores comunes de Google. Nuestro caso: los registros de nuestro propio servidor del 24 de octubre al 4 de noviembre de 2026, y nuestro robots.txt.