Bytespider
ByteDance · Otro buscador o asistente
ByteDance documenta Bytespider en chino, en la plataforma para webmasters de Toutiao Search, como el rastreador de ese buscador, y explica allí cómo aplica las reglas del robots.txt. La página enumera sus rangos de IP, dice que el DNS inverso del auténtico termina en bytedance.com y no menciona el entrenamiento de IA.
Ficha
- Operador
- ByteDance
- Para qué sirve
- Rastrea para un buscador o asistente que la nota no mide.
- Asistente al que alimenta
- Ninguno de los asistentes que medimos
- Cuenta en la nota de Parsigo
- No. Rastrea para buscar o responder, pero no para ninguno de los asistentes que medimos.
- Documentación oficial
- zhanzhang.toutiao.com/docs/intro/26899
Si lo bloqueas
Pides que tus páginas queden fuera del servicio para el que rastrea. Tu nota no cambia: no es de ninguno de los asistentes que medimos.
Dejar entrar o bloquear
Un grupo propio hace que Bytespider ignore las reglas de «User-agent: *». Si ahí tienes Disallow que quieres mantener para él, repítelos dentro de su grupo. Para dejarlo entrar, normalmente basta con no escribir nada.
Dejar entrar
User-agent: Bytespider Allow: /
Bloquear
User-agent: Bytespider Disallow: /
Pruébalo en tu web
Hacemos el diagnóstico de tu web y te enseñamos si Bytespider puede entrar, con la línea del robots.txt que lo decide. Gratis, sin registro.