Claude-SearchBot
Anthropic · Alimenta um motor de busca
O Claude-SearchBot indexa páginas para melhorar a relevância e a precisão das respostas de pesquisa do Claude. A Anthropic diz que os seus bots não tentam contornar os CAPTCHA dos sites que rastreiam.
Ficha
- Operador
- Anthropic
- Para que serve
- Rastreia a web para construir o índice de onde o assistente tira as respostas.
- Assistente que alimenta
- Claude
- Conta para a nota do Parsigo
- Sim. Alimenta o índice de um dos assistentes que medimos.
- Documentação oficial
- support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler
- Gamas de IP oficiais
- Lista em JSON
Se o bloqueares
Pedes que as tuas páginas fiquem fora do índice de onde o assistente (Claude) tira as respostas.
Deixar entrar ou bloquear
Um grupo próprio faz o Claude-SearchBot ignorar as regras do «User-agent: *». Se lá tens Disallow que queres manter para ele, repete-os dentro do grupo dele. Para o deixar entrar, normalmente basta não escrever nada.
Deixar entrar
User-agent: Claude-SearchBot Allow: /
Bloquear
User-agent: Claude-SearchBot Disallow: /
Testa-o no teu site
Fazemos o diagnóstico do teu site e mostramos-te se o Claude-SearchBot pode entrar, com a linha do robots.txt que o decide. Grátis, sem registo.