Applebot-Extended 控制什麼?
它讓網站可以拒絕其內容被用於訓練 Apple 的通用基礎模型,Apple 表示這些模型驅動其各項產品中的生成式 AI 功能。Apple 說明 Applebot-Extended 不會爬取網頁,只規範 Applebot 已爬取的資料可如何使用(Apple 支援,發布於 2026 年 9 月 4 日)。
封鎖它會讓您從 Siri 或 Spotlight 消失嗎?
不會。Apple 表示,禁止 Applebot-Extended 的網頁仍可被納入搜尋結果,而且搜尋排名不會考量 Applebot-Extended 的規則。
Applebot 本身才是資料驅動 Spotlight、Siri 和 Safari 搜尋技術等功能的爬蟲。要從這些功能中消失,需要封鎖的是 Applebot,而不是 Applebot-Extended。
如何使用 Applebot-Extended?
在 robots.txt 中為它加一個群組。Apple 自己的範例只禁止單一目錄;禁止 / 則涵蓋整個網站。要確認流量確實來自 Apple,Apple 建議使用 applebot.apple.com 網域的反向 DNS,或比對其公布的 IP 前綴清單。
# 不讓內容用於 Apple 基礎模型訓練
User-agent: Applebot-Extended
Disallow: /
# 保留在 Apple 搜尋功能中(Spotlight、Siri、Safari)
User-agent: Applebot
Allow: /在真實案例中,退出訓練會改變什麼?
它改變的是未來模型學到什麼,而不是引擎今天讀到什麼。在公開的 Tesla 案例中(2026 年 10 月 4 日),四個引擎在 25 個買家問題中引用了 455 個不同網站:這些回答是由引擎在回答當下能讀到的頁面塑造的。
Applebot-Extended、GPTBot 或 ClaudeBot 等退出訓練的規則,作用在較慢的那一半,也就是模型記得的內容。搜尋與使用者擷取代理則作用在較快的那一半。
關於 Applebot-Extended 的常見問題
Applebot-Extended 會爬取我的網站嗎?
不會。Apple 表示它不爬取網頁,只告訴 Apple,Applebot 爬取的內容能否用於訓練其基礎模型。
封鎖 Applebot-Extended 會影響 Apple 搜尋排名嗎?
不會。Apple 表示搜尋排名不會考量 Applebot-Extended 的規則。
Applebot-Extended 和 Google-Extended 類似嗎?
形式上類似:依各廠商自己的說明,兩者都是用於 AI 訓練用途的 robots.txt 標記,不影響該廠商的搜尋。
如何驗證 Applebot 流量?
Apple 透過 applebot.apple.com 網域的反向 DNS 並以正向查詢確認,或把 IP 與 Apple 公布的前綴比對,來辨識 Applebot 流量。
相關詞彙
- Google-Extended
Google-Extended 是一個 robots.txt 標記,控制 Google 爬取的內容能否用於訓練未來的 Gemini 模型及作為 Gemini 回答的依據,對 Google 搜尋沒有任何影響。
- robots.txt
robots.txt 是位於網站根目錄的純文字檔,依據 Robots Exclusion Protocol(RFC 9309)告訴爬蟲可以擷取哪些路徑。
- GPTBot
GPTBot 是 OpenAI 的網路爬蟲,蒐集可能用於訓練 OpenAI 生成式 AI 基礎模型的內容。
- CCBot
CCBot 是非營利組織 Common Crawl 的網路爬蟲;Common Crawl 公開發布免費、開放的網路副本,研究人員和 AI 開發者把它當成訓練資料使用。
實例:Tesla,公開的 AI 回答,2026 年 10 月 4 日:Proofsource 對 Tesla 的第一次掃描,25 個買家問題和 5 個品牌問題,四個引擎各回答每個問題一次。這是單一品牌的小樣本,僅作為範例,不是基準。