O ProofBot lê suas páginas do jeito que os assistentes de IA leem.

ProofBot é o crawler do Proofsource. Ele verifica como os assistentes de IA leem suas páginas, para que as marcas vejam por que a IA as recomenda ou as deixa de fora. Ele se identifica, respeita o robots.txt e lê devagar.

Fale com a gente sobre o ProofBot Veja como protegemos os dados

O user agent dele.

Toda solicitação do ProofBot envia exatamente este user agent. Ele nunca finge ser um navegador ou o crawler de outra empresa.

ProofBot/1.0 (+https://proofsource.co/proofbot; checks how AI assistants read your pages)

No robots.txt, ele responde pelo nome ProofBot, com qualquer combinação de maiúsculas e minúsculas.

O que ele lê.

Páginas que a IA já cita

Quando um assistente de IA cita uma página pública em uma resposta, o ProofBot lê essa página para entender por que ela foi escolhida.

O site da própria marca

As páginas públicas de uma marca que usa o Proofsource, para verificar o que os assistentes de IA conseguem ler nelas.

Só páginas públicas

O ProofBot nunca faz login e nunca lê uma página protegida por login.

Como ele se comporta.

Ele segue o robots.txt

O ProofBot lê seu robots.txt antes de qualquer página e pula todo caminho que ele bloqueia. Ele guarda uma cópia por até uma hora.

Ele lê devagar

No máximo uma solicitação a cada 1,5 segundo para o mesmo site. Cada leitura para após 12 segundos ou 4 MB.

Ele se identifica

O user agent acima identifica o ProofBot e aponta para esta página, para você sempre saber distinguir as requisições dele.

Como liberar ou bloquear.

Permita no robots.txt

User-agent: ProofBot
Allow: /

Libere no seu firewall

Se seu firewall ou proteção contra bots bloqueia o ProofBot, abra Configurações e depois Acesso ao site no seu workspace do Proofsource. Lá aparecem nossos endereços fixos assim que forem publicados e um header exclusivo da sua marca, X-Proofsource-Check. Enviamos esse header apenas para o seu próprio site. Crie uma regra de liberação para o header, ou para os endereços quando forem listados.

Bloquear

User-agent: ProofBot
Disallow: /

Outros nomes que você pode ver.

Algumas verificações pequenas leem uma página ou link de cada vez, com nome próprio. Cada uma leva a esta página.

User agent	O que ele faz
ProofSourceCitationLivenessBot/1.0 (+https://proofsource.co/proofbot)	Verifica se um link citado numa resposta de IA ainda abre.
ProofSourcePassageScoreBot/1.0 (+https://proofsource.co/proofbot)	Lê uma página para avaliar como é fácil para a IA citá-la.
Mozilla/5.0 (compatible; ProofSourceBot/1.0; +https://proofsource.co/proofbot)	Lê a página inicial de uma nova marca uma vez, para entender o que ela faz.

Dúvidas sobre o ProofBot?

Mande um e-mail com seu site e o que você viu nos seus logs. Uma pessoa responde.

Contato

support@proofsource.co