- Rastreadores de IA
- Meta-WebIndexer
Meta-WebIndexer
Meta · Otro buscador o asistente
Meta-WebIndexer rastrea la web para mejorar la calidad de los resultados de búsqueda de Meta AI. Meta dice que permitirlo en tu robots.txt ayuda a Meta AI a citar tu contenido y enlazarlo en sus respuestas.
Ficha
- Operador
- Meta
- Para qué sirve
- Rastrea para un buscador o asistente que la nota no mide.
- Asistente al que alimenta
- Ninguno de los asistentes que medimos
- Cuenta en la nota de Parsigo
- No. Rastrea para buscar o responder, pero no para ninguno de los asistentes que medimos.
- Documentación oficial
- developers.facebook.com/documentation/sharing/webmasters/web-crawlers
Si lo bloqueas
Pides que tus páginas queden fuera del servicio para el que rastrea. Tu nota no cambia: no es de ninguno de los asistentes que medimos.
Dejar entrar o bloquear
Un grupo propio hace que Meta-WebIndexer ignore las reglas de «User-agent: *». Si ahí tienes Disallow que quieres mantener para él, repítelos dentro de su grupo. Para dejarlo entrar, normalmente basta con no escribir nada.
Dejar entrar
User-agent: Meta-WebIndexer Allow: /
Bloquear
User-agent: Meta-WebIndexer Disallow: /
Pruébalo en tu web
Hacemos el diagnóstico de tu web y te enseñamos si Meta-WebIndexer puede entrar, con la línea del robots.txt que lo decide. Gratis, sin registro.