Herramienta gratuita · SEO técnico

AI Bot robots.txt Inspector

Analizá tu robots.txt y controlá con un switch si GPTBot, ClaudeBot, PerplexityBot y otros bots de IA pueden rastrear tu sitio. Gratis y sin registro.

¿Qué controla el bloqueo de bots de IA?

robots.txt es el archivo en la raíz de tu dominio (tusitio.com/robots.txt) donde cada crawler declara qué user-agent usa, y vos declarás qué puede rastrear. Los bots de IA como GPTBot (OpenAI), ClaudeBot (Anthropic) o PerplexityBot tienen su propio user-agent, distinto al de Googlebot. Eso significa que podés permitir que Google te indexe normalmente mientras decidís, bot por bot, cuáles pueden usar tu contenido para entrenar modelos de IA o generar respuestas.

Si nunca tocaste tu robots.txt, es muy probable que estos bots tengan acceso total por defecto: la ausencia de una regla no es lo mismo que un bloqueo.

¿Por qué controlar el acceso de los bots de IA?

  • Vas a saber quién te rastrea: GPTBot, ClaudeBot, PerplexityBot y otros bots de IA suelen tener acceso total por defecto si nunca los bloqueaste.
  • Decidís caso por caso, sin tocar código: un switch por bot en vez de editar el archivo a mano.
  • No afecta tu SEO tradicional: las reglas de robots.txt para bots de IA son independientes de Googlebot y tu posicionamiento en buscadores.

Cómo funciona

Paso 1

Pegá o cargá tu robots.txt

Desde el textarea o subiendo el archivo .txt directamente desde tu computadora.

Paso 2

Revisá la matriz de bots

Cada bot muestra su estado (Permitido, Bloqueado o Parcial) y qué regla lo determina.

Paso 3

Ajustá con un switch

Permitir o bloquear regenera el robots.txt al instante, listo para copiar o descargar.

Probá la herramienta

100% gratis, sin registro. Todo se procesa en tu navegador, ningún dato se envía a un servidor.

Pegá o cargá tu robots.txt

El análisis se actualiza automáticamente a medida que escribís, pegás o cargás un archivo.

Matriz de bots de IA

GPTBot

OpenAI

Permitido

Entrena los modelos GPT con contenido web.

Sin reglas aplicables: acceso total.

ChatGPT-User

OpenAI

Permitido

Navega la web en tiempo real cuando un usuario se lo pide dentro de ChatGPT.

Sin reglas aplicables: acceso total.

PerplexityBot

Perplexity AI

Permitido

Indexa contenido para generar respuestas de búsqueda con IA.

Sin reglas aplicables: acceso total.

ClaudeBot

Anthropic

Permitido

Entrena y actualiza los modelos Claude.

Sin reglas aplicables: acceso total.

Google-Extended

Google

Permitido

Controla el uso de tu contenido para entrenar Gemini (no afecta a Google Search).

Sin reglas aplicables: acceso total.

Bytespider

ByteDance

Permitido

Recopila contenido para los modelos de IA de ByteDance (TikTok).

Sin reglas aplicables: acceso total.

CCBot

Common Crawl

Permitido

Dataset abierto usado para entrenar múltiples LLMs de terceros.

Sin reglas aplicables: acceso total.

FacebookBot

Meta

Permitido

Recopila contenido para los servicios de IA de Meta.

Sin reglas aplicables: acceso total.

robots.txt resultante

editable

Preguntas frecuentes

¿Qué es GPTBot y por qué aparece en mi robots.txt?

GPTBot es el crawler de OpenAI que recopila contenido web para entrenar sus modelos de IA. Si no tenés una regla explícita para él (ni un bloque User-agent: * que lo restrinja), por defecto puede rastrear tu sitio libremente.

¿Bloquear estos bots afecta mi posicionamiento en Google?

No. robots.txt no tiene ningún efecto sobre Googlebot ni tu posicionamiento en Google Search — son reglas independientes por user-agent. Bloquear GPTBot, ClaudeBot o similares solo impide que esos crawlers de IA usen tu contenido.

¿Qué diferencia hay entre un bot de IA y un buscador tradicional?

Los buscadores tradicionales (Googlebot, Bingbot) indexan tu contenido para mostrarlo en resultados de búsqueda, dirigiendo tráfico a tu sitio. Los bots de IA como GPTBot o CCBot suelen recopilar contenido para entrenar modelos, sin necesariamente citar la fuente ni generar tráfico de vuelta.

¿Qué pasa si no tengo ninguna regla para estos bots?

Si un bot no tiene una regla específica ni existe un bloque User-agent: * que lo restrinja, por defecto tiene acceso total a tu sitio.

¿Esta herramienta modifica mi sitio automáticamente?

No. Funciona 100% en tu navegador: analiza el texto que pegás o cargás y te devuelve un robots.txt actualizado para que vos lo subas manualmente a la raíz de tu servidor.

¿Tiene costo?

No, es gratuita y no requiere registro.

Próximo paso

¿Listo para escalar tu visibilidad orgánica?

Hablamos contigo, entendemos tu negocio y preparamos una propuesta a medida. Sin letra pequeña.