Transparência
O nosso rastreador
Analisamos sites que outras pessoas nos pedem. Se o teu for um deles, aqui está tudo o que fazemos — e como pará-lo num minuto.
O nosso user-agent
ParsigoBot/0.1 (+https://parsigo.com/bot)
Como bloquear-nos
Acrescenta isto ao teu robots.txt. Cumprimo-lo a partir do pedido seguinte, sem precisares de nos avisar.
User-agent: ParsigoBot Disallow: /
Para bloquear só a prova com nomes de bots (ver abaixo) e deixar-nos analisar o resto, usa User-agent: ParsigoBot-teste com Disallow: /.
Se preferires que evitemos só uma parte, troca a barra pelo caminho: Disallow: /privado/. E se o teu robots.txt já tiver um Disallow: / para *, não é preciso mais nada: já o cumprimos.
Preferes escrever-nos? info@parsigo.com .
O que pedimos
Quando alguém analisa um domínio, pedimos:
Até 12 páginas do site
Escolhidas entre o teu sitemap e as ligações da página inicial, repartidas por secções diferentes. A página inicial costuma ser a menos representativa de um site, e uma nota tirada só dela dizia pouco.A tua página de entrada, mais 8 vezes
Uma por cada rastreador de IA que testamos (GPTBot, ClaudeBot, PerplexityBot e as suas variantes de pesquisa e de resposta), com o nome dele no user-agent e o nosso ao lado:GPTBot/1.0 (compatible; ParsigoBot-teste; …). Assim vemos se o teu firewall trata de forma diferente os bots de IA. Se o teurobots.txtnos bloqueia, comoParsigoBotou comoParsigoBot-teste, não fazemos esta prova.O teu robots.txt
Para avaliar, agente a agente, quem consegue entrar. É a comprovação que mais pesa no resultado.O teu sitemap
O que estiver declarado norobots.txtou, se não houver,/sitemap.xml.Mais seis pedidos, se o teu robots.txt os deixar
O índice para agentes (llms.txtellms-full.txt), o manifesto de comércio (/.well-known/ucp), o diretório do Web Bot Auth, a versão em Markdown da tua página de entrada, e um endereço inventado — algo como/parsigo-a1b2c3d4-no-existe— para ver como responde a tua página de erro. Nenhum conta para a nota. Se o teurobots.txtproibir algum destes caminhos aParsigoBot, não o pedimos.Até seis páginas outra vez, se alguém o pedir no relatório
Só para o bloco «O que um assistente percebe do teu site», e só quando alguém o pede a partir do relatório: voltamos a ler o teurobots.txte pedimos até seis páginas que ele nos deixe, para as dar como texto a um assistente de IA (o da Anthropic). Se o teurobots.txtnos fechar o site, não pedimos nada. Não conta para a nota.
O ritmo
O que não fazemos
Não executamos JavaScript
Lemos o HTML tal como sai do teu servidor — exatamente o que um rastreador de IA vê. É o objeto da medição, não uma limitação.Não nos fazemos passar por ninguém
Quando usamos o nome de outro bot, na prova acima, o user-agent continua a dizer quem somos e aponta para esta página. O teurobots.txtavaliamo-lo lendo-o e aplicando as suas regras; a prova só olha para o que a leitura não vê: um firewall que filtra pelo nome.Não guardamos o teu conteúdo
Analisamos o HTML em memória e ficamos com o resultado: a nota, os achados e os caminhos afetados. O texto das tuas páginas não é armazenado por nós. No bloco do assistente, até seis páginas vão como texto à Anthropic, que o apaga, por regra, em 30 dias.Não entramos onde não devemos
Nada de zonas privadas, formulários, carrinhos, contas ou áreas de administração — esses caminhos são descartados mesmo quando os encontramos. Também não tentamos contornar nenhuma proteção.
Como sabes que somos nós?
O user-agent leva este mesmo endereço entre parênteses. Qualquer pessoa pode escrever esse texto num pedido — por isso não te pedimos que confies nele, mas que o trates pelo que é: uma assinatura verificável até esta página, e mais nada.
Se vires esse agente nos teus registos e não estavas à espera, é porque alguém pediu uma análise do teu domínio. Bloqueia-nos com as linhas de cima, ou escreve-nos.