ProofBot 讀取您頁面的方式和 AI 助理一樣。
ProofBot 是 Proofsource 的爬蟲。它檢查 AI 助理如何讀取您的頁面,讓品牌看出 AI 為什麼推薦或略過它們。它會表明身分、遵守 robots.txt,並且緩慢讀取。
它的 user agent。
每個 ProofBot 請求都會送出這個 user agent,一字不差。它從不假裝成瀏覽器或其他公司的爬蟲。
ProofBot/1.0 (+https://proofsource.co/proofbot; checks how AI assistants read your pages)在 robots.txt 中,它對應的名稱是 ProofBot,大小寫皆可。
它讀取的內容。
AI 已在引用的頁面
AI 助理在回答中引用公開頁面時,ProofBot 會讀取該頁面,了解它為什麼被選中。
品牌自己的網站
使用 Proofsource 的品牌的公開頁面,用來檢查 AI 助理能在上面讀到什麼。
僅限公開頁面
ProofBot 從不登入,也從不讀取需要登入的頁面。
它的行為方式。
它遵守 robots.txt
它遵守 robots.txt
ProofBot 在讀取任何頁面之前會先讀取您的 robots.txt,並略過每個被禁止的路徑。它會保留副本最多一小時。
它讀取緩慢
它讀取緩慢
對同一網站最多每 1.5 秒一次請求。每次讀取在 12 秒或 4 MB 後停止。
它會表明身分
它會表明身分
上方的使用者代理標明 ProofBot 並連結到本頁,讓您隨時能分辨它的請求。
如何允許或封鎖它。
在 robots.txt 中允許它
User-agent: ProofBot
Allow: /在防火牆中放行它
如果您的防火牆或機器人防護封鎖了 ProofBot,請在 Proofsource 工作區開啟「設定」,然後「網站存取」。那裡會在公布後顯示我們的固定位址,以及您品牌專屬的標頭 X-Proofsource-Check。我們只把這個標頭傳送到您自己的網站。請為該標頭新增允許規則,或在位址公布後為位址新增。
封鎖
User-agent: ProofBot
Disallow: /您可能看到的其他名稱。
有幾項小檢查會以自己的名稱一次讀取一個頁面或連結。每一項都會連結到本頁。
| User agent | 它做什麼 |
|---|---|
| ProofSourceCitationLivenessBot/1.0 (+https://proofsource.co/proofbot) | 檢查 AI 回答引用的連結是否仍能開啟。 |
| ProofSourcePassageScoreBot/1.0 (+https://proofsource.co/proofbot) | 讀取一個頁面,評估 AI 引用它的容易程度。 |
| Mozilla/5.0 (compatible; ProofSourceBot/1.0; +https://proofsource.co/proofbot) | 讀取新品牌的首頁一次,以了解該品牌在做什麼。 |
對 ProofBot 有疑問?
寄信給我們,附上您的網站以及您在記錄中看到的內容。會由真人回覆。