Herramienta SEO, IA y GEO gratisRobots.txt tester para IA
Introduzca la dirección de su web: el probador lee su archivo robots.txt e indica, IA por IA, qué rastreadores pueden leer sus páginas. Primero, los que permiten aparecer citado en las respuestas; después, los que sirven para el entrenamiento. Verá de un vistazo si ChatGPT, Claude, Perplexity o Google pueden citarle.
Cómo usar el probador
- Introduzca la dirección de su web; añada una página concreta si quiere probarla.
- Lea el resumen: una línea por IA indica si puede citarle.
- Abra el detalle para ver la regla aplicada a cada rastreador y, si es necesario, corrija con el generador de robots.txt.
Cómo leer el resultado
Los rastreadores de búsqueda son los que más cuentan: si están bloqueados, la IA no puede utilizar sus páginas en sus respuestas. Los rastreadores de entrenamiento dependen de su elección. Los rastreadores a petición leen una página cuando un usuario lo pide; algunos ignoran el robots.txt, y el probador lo indica.
Los rastreadores probados
Los rastreadores publicados por OpenAI, Anthropic, Perplexity, Google, Mistral AI, Apple y Common Crawl, además de Bingbot, el rastreador de Bing. La lista sigue sus documentaciones oficiales; se actualiza cuando una empresa añade un rastreador o le cambia el nombre.
Para ir más lejos
El probador lee su archivo robots.txt. Revise también los ajustes de su cortafuegos, de su proveedor de alojamiento o de Cloudflare, que se aplican al margen de este archivo. Para una directiva noindex, utilice el SEO Checker on-page. Y para saber si las IA ya le citan, inicie la auditoría SEO para IA gratis.
Preguntas frecuentes: probar el robots.txt, SEO, IA y GEO
¿Cómo comprobar el archivo robots.txt?
Para los rastreadores de IA, este probador responde rastreador por rastreador. Para Google, Search Console también ofrece un informe de robots.txt, en sus ajustes, que muestra la versión leída por Google y sus errores.
¿Cómo saber si ChatGPT puede leer mi web?
Compruebe que su robots.txt permite OAI-SearchBot y que ningún cortafuegos lo bloquea. En sus estadísticas, las visitas con la mención «utm_source=chatgpt.com» muestran que ChatGPT ya recomienda algunas de sus páginas.
Mi robots.txt lo permite todo: ¿por qué la IA no me cita?
Poder leer una página no basta. La IA cita las páginas que responden con claridad a las preguntas y las empresas de las que hablan otras webs. La auditoría SEO para IA gratis muestra a quién cita en su lugar, y por qué.
¿Qué hago si un rastreador está bloqueado?
Cree un archivo nuevo con el generador de robots.txt y publíquelo según su plataforma. Después, vuelva a probarlo.
¿La prueba sigue las reglas de Google?
Sí. El probador aplica la norma del robots.txt tal como Google la interpreta: gana la regla más específica y, a igual especificidad, la que permite prevalece sobre la que bloquea.