Bytespider
ByteDance · Outro motor de busca ou assistente
A ByteDance documenta o Bytespider em chinês, na plataforma para webmasters do Toutiao Search, como o rastreador desse motor de pesquisa, e explica lá como aplica as regras do robots.txt. A página lista as gamas de IP dele, diz que o DNS inverso do verdadeiro termina em bytedance.com e não menciona o treino de IA.
Ficha
- Operador
- ByteDance
- Para que serve
- Rastreia para um motor de busca ou assistente que a nota não mede.
- Assistente que alimenta
- Nenhum dos assistentes que medimos
- Conta para a nota do Parsigo
- Não. Rastreia para pesquisar ou responder, mas não para nenhum dos assistentes que medimos.
- Documentação oficial
- zhanzhang.toutiao.com/docs/intro/26899
Se o bloqueares
Pedes que as tuas páginas fiquem fora do serviço para o qual rastreia. A tua nota não muda: não é de nenhum dos assistentes que medimos.
Deixar entrar ou bloquear
Um grupo próprio faz o Bytespider ignorar as regras do «User-agent: *». Se lá tens Disallow que queres manter para ele, repete-os dentro do grupo dele. Para o deixar entrar, normalmente basta não escrever nada.
Deixar entrar
User-agent: Bytespider Allow: /
Bloquear
User-agent: Bytespider Disallow: /
Testa-o no teu site
Fazemos o diagnóstico do teu site e mostramos-te se o Bytespider pode entrar, com a linha do robots.txt que o decide. Grátis, sem registo.