Diretório

Rastreadores de IA: quem são e como os gerir

Uma ficha por cada nome que podes usar no robots.txt, dos rastreadores de IA aos de redes sociais e de SEO: quem o opera, para que serve, se conta para a nota do diagnóstico e o que acontece se o bloqueares.

Cada ficha liga à documentação oficial do operador, e diz quando não a encontrámos. Os blocos de robots.txt para copiar são verificados pelo mesmo leitor de robots.txt que o diagnóstico usa.

Para escrever o robots.txt com estes nomes, usa o gerador de robots.txt: escolhes quem entra, grupo a grupo, e levas o ficheiro pronto.

Para saber quais destes bots te visitam mesmo, usa o leitor de registos: lê o log de acesso do teu site no teu browser e confirma o IP de cada visita.

Respondem no momento

Vão buscar uma página quando alguém faz uma pergunta a um assistente. Contam para a nota.

Alimentam um motor de busca

Constroem o índice de onde um assistente tira as respostas. Contam para a nota.

Outros motores de busca e assistentes

Rastreiam para pesquisar ou responder, mas para serviços que a nota não mede.

Recolhem para treinar

Recolhem textos que servem para treinar modelos. Bloqueá-los não te tira das respostas.

Sinais de exclusão

Não são rastreadores: são nomes no robots.txt que limitam o uso do teu conteúdo pela IA.

Publicidade

Os operadores documentam-nos para a publicidade. Não contam para a nota.

Redes sociais

Leem a tua página quando alguém partilha uma ligação, para mostrar o título e a imagem.

Ferramentas de SEO

Rastreiam para ferramentas de SEO que agências e concorrentes usam para auditar sites.

Nomes retirados

Nomes que o operador já não lista na documentação dos seus rastreadores.