¿Pueden ChatGPT, Claude y Perplexity leer tu web?

Revisamos tu robots.txt, llms.txt, sitemap y la página que indiques. No guardamos la URL.

Cómo funciona el verificador

Escribes la dirección de tu web y el verificador descarga, desde nuestro servidor, cuatro archivos públicos: la página que indicas, tu robots.txt, tu llms.txt y tu sitemap. No ejecuta JavaScript, igual que la mayoría de los rastreadores de IA, así que ves tu web como la ven ellos.

Con el robots.txt aplica las mismas reglas que siguen los bots (el estándar RFC 9309): cada bot obedece solo al grupo que lo nombra, y si ninguno lo nombra, al grupo general «*». Por eso un bot puede estar bloqueado aunque tu regla general lo permita, o al revés. La tabla te muestra, bot por bot, si puede entrar y qué línea de tu archivo lo decide.

No todos los bots de IA hacen lo mismo. Los de búsqueda (OAI-SearchBot, Claude-SearchBot y PerplexityBot) deciden si apareces en las respuestas: bloquearlos te deja fuera. Los de entrenamiento (GPTBot, ClaudeBot, Google-Extended y CCBot) recogen contenido para entrenar modelos: bloquearlos es una decisión legítima y no te quita de las respuestas de búsqueda. Los que actúan cuando un usuario lo pide (ChatGPT-User, Claude-User y Perplexity-User) visitan una página concreta; OpenAI y Perplexity avisan de que los suyos pueden no seguir robots.txt.

Además del robots.txt revisamos lo que también puede dejarte fuera: una etiqueta noindex en la página o en la cabecera X-Robots-Tag, poco texto en el HTML sin JavaScript (típico de webs hechas solo con React, Vue o constructores visuales mal configurados), el título, la descripción, el canonical, los datos estructurados JSON-LD y el sitemap.

El llms.txt aparece como informativo: es una propuesta para describir tu sitio a los modelos de lenguaje, pero ningún gran buscador ha confirmado que lo use. Tenerlo no te hará aparecer y no tenerlo no te penaliza.

Si un sitio bloquea a nuestro servidor (un firewall, un anti-bots o Cloudflare respondiendo con error 403), el resultado sale como «no se pudo verificar» y no como fallo de tu web: no podemos saber qué ve un bot real. No guardamos la URL que analizas ni la enviamos a la analítica; el resultado se guarda unas horas en caché para no volver a descargar el mismo sitio.

El plan completo para que la IA te recomiende: Cómo lograr que ChatGPT y Perplexity recomienden tu marca

Preguntas frecuentes

¿Bloquear GPTBot me saca de ChatGPT?

No. Según OpenAI, cada bot se controla por separado: GPTBot recoge contenido para entrenar modelos y OAI-SearchBot decide si apareces en las respuestas de búsqueda de ChatGPT. Puedes bloquear GPTBot y seguir apareciendo si permites OAI-SearchBot.

¿Qué significa «decisión tuya» en un bot bloqueado?

Que ese bot es de entrenamiento. Bloquearlo evita que tu contenido se use para entrenar modelos y no afecta a que te citen en las respuestas de búsqueda, así que no lo contamos como error: es una elección legítima.

¿Por qué sale «no se pudo verificar»?

Porque tu servidor o tu CDN respondió a nuestro verificador con un error (por ejemplo 403), tardó más de 5 segundos o no respondió. Puede que un bot real sí entre, o puede que también lo bloquee: revisa la configuración de bots de tu hosting o de Cloudflare.

¿Necesito un llms.txt?

No es imprescindible. Es una propuesta para orientar a los modelos de lenguaje, pero ningún gran buscador ha confirmado que lo use. Prioriza que los bots de búsqueda puedan entrar y que tu contenido se lea sin JavaScript.

Si todo sale correcto, ¿ChatGPT me va a recomendar?

No necesariamente. Que la IA pueda leer tu web es el requisito; que te cite depende de tu contenido, de lo que otros sitios dicen de ti y de tu autoridad en el tema. Esta herramienta mide lo primero, no lo segundo.

¿Guardan la URL que analizo?

No la guardamos en ninguna base de datos ni la enviamos a la analítica. El resultado queda unas horas en la caché del servidor para que, si otra persona analiza el mismo sitio, no lo volvamos a descargar.

Programa de formación

¿Listo para transformar tu idea en un proyecto real?

Transforma es el programa donde aprenderás a crear, ejecutar y escalar tu proyecto con claridad y método.

Conocer el Programa Transforma