AhrefsBot
Ahrefs · Herramienta SEO
AhrefsBot alimenta la base de datos de Ahrefs y la de Yep, el buscador que desarrolla Ahrefs. Respeta el Crawl-delay en las páginas HTML pero no al renderizar JavaScript, así que tus registros pueden mostrar más peticiones de las que permite el intervalo.
Ficha
- Operador
- Ahrefs
- Para qué sirve
- Rastrea para una herramienta de SEO que usan agencias y competidores para auditar webs.
- Asistente al que alimenta
- No alimenta las respuestas de ningún asistente
- Cuenta en la nota de Parsigo
- No. Es una herramienta de SEO, no de IA.
- Documentación oficial
- ahrefs.com/robot
Si lo bloqueas
Le pides a la herramienta que deje de analizar tu web. Es decisión tuya, y tu nota no cambia.
Dejar entrar o bloquear
Un grupo propio hace que AhrefsBot ignore las reglas de «User-agent: *». Si ahí tienes Disallow que quieres mantener para él, repítelos dentro de su grupo. Para dejarlo entrar, normalmente basta con no escribir nada.
Dejar entrar
User-agent: AhrefsBot Allow: /
Bloquear
User-agent: AhrefsBot Disallow: /
Pruébalo en tu web
Hacemos el diagnóstico de tu web y te enseñamos si AhrefsBot puede entrar, con la línea del robots.txt que lo decide. Gratis, sin registro.
A tener en cuenta
Solo cubre el índice de Ahrefs. Su auditoría de sitios usa otro token, AhrefsSiteAudit.