ProofBot leest je pagina's zoals AI-assistenten dat doen.

ProofBot is de crawler van Proofsource. Hij controleert hoe AI-assistenten je pagina's lezen, zodat merken kunnen zien waarom AI ze aanbeveelt of weglaat. Hij maakt zich bekend, volgt robots.txt en leest langzaam.

De user agent.

Elk verzoek van ProofBot stuurt precies deze user agent. Hij doet zich nooit voor als een browser of als de crawler van een ander bedrijf.

ProofBot/1.0 (+https://proofsource.co/proofbot; checks how AI assistants read your pages)

In robots.txt luistert het naar de naam ProofBot, in hoofd- of kleine letters.

Wat het leest.

Pagina's die AI al citeert

Als een AI-assistent in een antwoord een openbare pagina citeert, leest ProofBot die pagina om te zien waarom ze werd gekozen.

De eigen site van een merk

De openbare pagina's van een merk dat Proofsource gebruikt, om te controleren wat AI-assistenten erop kunnen lezen.

Alleen openbare pagina’s

ProofBot logt nooit in en leest nooit een pagina achter een login.

Hoe het zich gedraagt.

Het volgt robots.txt

ProofBot leest je robots.txt vóór elke pagina en slaat elk pad over dat daarin is uitgesloten. Hij bewaart een kopie tot een uur.

Het leest langzaam

Hoogstens één verzoek per 1,5 seconde naar dezelfde site. Elke leesactie stopt na 12 seconden of 4 MB.

Het zegt wie het is

De user agent hierboven noemt ProofBot en linkt naar deze pagina, zodat je zijn verzoeken altijd kunt herkennen.

Hoe je het toestaat, of blokkeert.

Toestaan in robots.txt
User-agent: ProofBot
Allow: /
Toelaten via je firewall

Als je firewall of botbescherming ProofBot blokkeert, open dan Instellingen en daarna Sitetoegang in je Proofsource-werkruimte. Daar staan onze vaste adressen zodra ze zijn gepubliceerd, en een header die uniek is voor jouw merk, X-Proofsource-Check. Die header sturen we alleen naar je eigen site. Voeg een allow-regel toe voor de header, of voor de adressen zodra die vermeld staan.

Blokkeren
User-agent: ProofBot
Disallow: /

Andere namen die je kunt tegenkomen.

Een paar kleine checks lezen één pagina of link tegelijk, onder hun eigen naam. Elk ervan linkt naar deze pagina.

User agentWat het doet
ProofSourceCitationLivenessBot/1.0 (+https://proofsource.co/proofbot)Controleert of een link die een AI-antwoord citeerde nog opent.
ProofSourcePassageScoreBot/1.0 (+https://proofsource.co/proofbot)Leest één pagina om te scoren hoe makkelijk AI die kan citeren.
Mozilla/5.0 (compatible; ProofSourceBot/1.0; +https://proofsource.co/proofbot)Leest de homepage van een nieuw merk één keer, om te leren wat het merk doet.

Vragen over ProofBot?

Mail ons met je site en wat je in je logs zag. Een mens antwoordt.