Quais rastreadores de IA ela verifica?

Como o veredito é formado

A auditoria não visita o seu site vinte vezes fingindo ser cada bot. Ela busca o seu robots.txt uma vez, lê como um rastreador leria, e testa o caminho auditado contra cada um dos 20 tokens. Para cada token, registra se as regras permitem aquele caminho ou o bloqueiam. A única verificação de rastreabilidade reúne esses 20 vereditos em uma linha, e o detalhamento por trás dela diz o nome de cada rastreador e o que ele recebeu.

Os limites são fixos:

• Nenhum rastreador bloqueado: aprovado. Um robots.txt ausente também aprova, já que um arquivo que não existe não bloqueia ninguém.
• Um ou dois bloqueados: alerta, e o detalhamento diz quais.
• Três ou mais bloqueados: reprovado.

Por que a lista é tão longa

Cada mecanismo envia o próprio rastreador, e vários enviam mais de um. Só a OpenAI anuncia GPTBot, ChatGPT-User e OAI-SearchBot. Um robots.txt escrito pensando no Google, que é o caso da maioria, pode deixar o Google passar e barrar todos os outros nomes sem ninguém perceber, porque nada quebra do lado do Google. É essa falha que a verificação existe para pegar: uma página que ranqueia bem e é invisível para os mecanismos que montam respostas.

O que a verificação não enxerga

O veredito vem das regras, não de uma visita ao vivo. Um firewall que barra rastreadores por user agent não deixa rastro no robots.txt, então não aparece aqui. Se esse mesmo firewall barrar o nosso auditor, a rodada termina como inacessível e diz isso, o que já é um sinal por si só. No GEO Gerenciado, as regras de robots são uma das correções que nossa equipe publica e confirma com uma nova rodada.