Comprobador de rastreadores de IA
Mira bot por bot qué bots de IA permite o bloquea tu robots.txt, y si puedes ser citado en las respuestas de ChatGPT, Claude y Perplexity.
Qué muestra el comprobador
Todos los rastreadores de IA principales, comprobados contra tus reglas de robots.txt.
Bots de búsqueda y de usuario
OAI-SearchBot, ChatGPT-User, Claude-SearchBot, PerplexityBot y otros que deciden las citas.
Bots de entrenamiento
GPTBot, ClaudeBot, Google-Extended y otros bots que recopilan datos para entrenar modelos.
Resultado por bot
Cada bot se evalúa contra su propio grupo de robots.txt, tal como lo leen los rastreadores.
Acceso de Google
Confirma que Googlebot llega a la página, porque AI Overviews usa el índice de Google.
Cómo funciona
Introduce una URL
Una página de tu sitio, para probar también reglas específicas de ruta.
Leemos robots.txt
Las reglas se comparan por bot según el estándar robots.txt.
Decide qué permitir
Permite los bots de búsqueda para recibir citas y bloquea los de entrenamiento si lo prefieres.
Solo se revisa robots.txt. Un firewall, la protección contra bots de un CDN o un límite de peticiones pueden seguir bloqueando a los rastreadores de IA.
Preguntas
No. GPTBot recopila datos de entrenamiento. La búsqueda de ChatGPT usa OAI-SearchBot y ChatGPT-User obtiene páginas a petición del usuario. Puedes bloquear GPTBot y seguir siendo citado.
Bloquear los bots de entrenamiento es una opción legítima. Bloquear los de búsqueda y de usuario te saca de las respuestas de IA, algo que la mayoría de sitios quiere evitar.
No. Google-Extended controla el uso para entrenar y fundamentar Gemini. AI Overviews sale del índice normal de Google.
Comprueba tu preparación completa para la búsqueda con IA
Contenido que responde primero, señales de entidad y datos estructurados junto con el acceso de rastreadores.
Ejecutar auditoría gratis