Como usar o teste de acesso de rastreadores de busca e IA
- Informe a URL do site e ajuste as opções conforme necessário.
- Execute a ferramenta e analise os resultados, as evidências e as limitações.
- Copie ou baixe o resultado e depois confira-o com o site real, os dados de origem ou os registros da empresa.
Experimente um exemplo concreto
Compare a resposta da página para as identidades de rastreador disponíveis e inspecione os cabeçalhos HTTP.
Como interpretar os resultados
Apenas a string de User-Agent é simulada. A requisição não vem de uma rede de rastreador verificada e não comprova rastreamento, indexação ou treinamento de IA reais.
Perguntas frequentes
200 significa que foi indexado por IA?
Não significa aprovação. Indica apenas que esta requisição com User-Agent simulado retornou o código de status 200.
Um 403 significa com certeza que o Googlebot real foi bloqueado?
Não necessariamente. O IP de origem do Googlebot real é diferente do desta ferramenta; combine com a verificação oficial de IP e a análise de logs.
Este resultado considera o robots.txt?
Esta requisição verifica respostas HTTP; as regras do robots.txt devem ser vistas separadamente com o verificador de robots.txt.
O que são rastreadores de IA como GPTBot e ClaudeBot e devo bloqueá-los?
GPTBot (OpenAI), ClaudeBot (Anthropic), Google-Extended e agentes semelhantes são rastreadores web de empresas de IA que coletam conteúdo para treinar modelos ou para busca com IA; eles se identificam pelo User-Agent e seguem o robots.txt. Bloqueá-los impede que essas empresas coletem seu conteúdo, mas também pode reduzir suas chances de ser citado em respostas de IA; sites de exportação e de marca geralmente permitem páginas públicas de produtos e recursos e bloqueiam apenas áreas administrativas, conteúdo de membros e o que não deve ser público. Esta ferramenta mostra o que seu site retorna para essas identidades.