Ferramenta gratuita
Verificador de robots.txt para IA.
Seu site bloqueia o ChatGPT?
Veja quais robôs de IA podem ler o seu site, separados entre busca, acesso a pedido do usuário e treino de modelos, e gere um robots.txt pronto para copiar.
Perguntas frequentes
Como saber se o meu site bloqueia o ChatGPT?+
Digite o endereço do site na ferramenta acima. Lemos o seu robots.txt e conferimos as regras para os três robôs da OpenAI: OAI-SearchBot (busca do ChatGPT), ChatGPT-User (quando alguém pede ao ChatGPT para abrir uma página) e GPTBot (treino). Também testamos se o servidor recusa esses robôs, o que o robots.txt não mostra.
Qual a diferença entre GPTBot, OAI-SearchBot e ChatGPT-User?+
O GPTBot coleta conteúdo para treinar os modelos da OpenAI. O OAI-SearchBot indexa páginas para a busca do ChatGPT, e é ele que decide se o seu site pode aparecer como fonte nas respostas. O ChatGPT-User abre uma página quando um usuário pede. Dá para bloquear o treino e continuar aparecendo nas respostas.
Bloquear o GPTBot tira o meu site do ChatGPT?+
Não diretamente: o GPTBot é só para treino. Para aparecer nas respostas com busca do ChatGPT, o que importa é liberar o OAI-SearchBot e o ChatGPT-User. Muitos sites bloqueiam todos os robôs da OpenAI de uma vez e acabam sumindo das respostas sem perceber.
O que é o Content-Signal no robots.txt?+
É uma linha proposta pelo Cloudflare para dizer como o seu conteúdo pode ser usado por IA: search (busca), ai-input (usar nas respostas) e ai-train (treinar modelos), cada um com yes ou no. Ainda é um padrão novo, mas deixa a sua escolha explícita.
O robots.txt libera tudo, mas o ChatGPT ainda não acessa o site. Por quê?+
Provavelmente o bloqueio está no servidor: firewall da hospedagem, regra do Cloudflare contra bots ou plugin de segurança do WordPress. Nesses casos o robô recebe um erro antes de ler qualquer coisa. A ferramenta testa isso e avisa quando acontece.
Posso usar o robots.txt sugerido direto no meu site?+
Ele foi montado a partir do seu robots.txt atual: mantém as áreas que você já protege, as regras para outros robôs e os sitemaps. Mesmo assim, revise antes de publicar, principalmente se o site tiver regras de rastreamento específicas.