我們的 ChatGPT 回答有三分之二從未搜尋網路
搜尋「為什麼 ChatGPT 不提我的品牌」,您會得到一份一致的清單:建立權威、登上它信任的彙整文章。每一項都假設模型讀過您類別的某些內容,並把您排在別人後面。但很多時候,它什麼都沒讀。
2026 年 8 月 22 日至 10 月 1 日之間,我們為 364 個已完成的回答評分,這些回答兩方面都能查核:回答提及了哪個品牌,以及引用了哪些頁面。共四個品牌、三個帳戶,屬於相鄰的 B2B 軟體類別,在兩個會回傳引用的引擎上:Google AI Overviews,以及我們的 ChatGPT 引擎,它呼叫附帶網路搜尋工具的 OpenAI API。這是很窄的一塊樣本,所以這裡的每個數字都請當作我們自己的數字來看。
- 其中 226 個回答來自 ChatGPT 引擎,其中 215 個記錄了模型執行了幾次網路搜尋。
- 215 個中有 147 個執行了零次搜尋,所以完全沒有擷取任何內容。比例是 68%。
- 68 個執行了一到兩次搜尋。
搜尋讓提及率從 6% 變成 78%
在 147 個沒有搜尋的回答中,有 9 個提及品牌。比例是 6.1%,95% 信賴區間為 3.3% 到 11.2%。在 68 個有搜尋的回答中,有 53 個提及品牌:77.9%,區間為 66.7% 到 86.2%。兩個區間相差甚遠。
顯而易見的反駁是這些是不同的問題。模型比較可能為商業比較型問題搜尋,而不是定義型問題,也比較可能在前者中提及廠商。所以我們取了 9 個被重複詢問、兩種情況都出現過的 prompt,拿同一個問題和自己比較。有瀏覽的執行在 23 個回答中有 18 個提及品牌,78.3%。沒有瀏覽的執行為 29 個中有 7 個,24.1%。差距較小,方向相同,區間依然沒有重疊。
請把 24% 而不是 6% 當作誠實的下限。模型有沒有查詢,是我們發現區分「提及您的回答」與「沒提及您的回答」最大的因素,而這與您的頁面毫無關係。
要不要搜尋由模型決定,一次一個 prompt
坊間關於這件事的建議已經落後好幾年。一份廣為流傳的指南要您每個 prompt 執行兩次,一次用預設對話,一次開啟瀏覽,彷彿是由讀者決定。另一份則解釋 ChatGPT「不會擷取特定文件」,而是根據訓練模式運作,這只描述了沒有搜尋的那些回答。
OpenAI 的 API 文件說得更直白。附上網路搜尋工具只是讓它可以使用;用他們的話說,模型可以根據輸入 prompt 的內容選擇是否搜尋網路。tool_choice 設為 auto 時,搜尋是選擇性的;如果必須執行搜尋,就需要把 tool_choice 設為 required。沒有人去切換開關。模型一個 prompt 一個 prompt 地決定,同一個問題問兩次也可能做出不同決定。
這代表您的能見度數字是兩個群體加總的結果。有些回答查詢後漏掉了您,有些則從未查詢。不同的問題、不同的修正,而一個百分比把兩者都掩蓋了。
Google AI Overviews 沒有「不查詢」這回事
另一個引擎的表現完全不同。在我們評分的 138 個 AI Overview 回答中,有 81 個沒有提及品牌,但這 81 個全都引用了其他頁面。每個回答引用來源的中位數是 8 個,最多 16 個。
這讓 AI Overviews 上的落空很容易解讀。這個問題擷取了八個頁面,沒有一個是您的。Google 的指引說,頁面只要已建立索引並可顯示摘要,就有資格成為支援連結,沒有額外要求;而且即使符合所有要求,也不代表 Google 會爬取、建立索引或呈現它。Google 也表示,只有在其系統判斷 AI Overviews 能為傳統搜尋增加價值時才會出現,所以它經常不會觸發。這種不出現是第三種結果,不在這些計數之中。
引用品牌自家頁面的 97 個回答中,有 94 個也提及了品牌
從擷取的角度來看,這個關係很不對稱。在兩個引擎中,有 97 個回答把品牌自家網域的頁面列入來源清單,其中 94 個提及了品牌:96.9%,區間為 91.3% 到 98.9%。在 ChatGPT 引擎上是 44 個中的 44 個。在沒有引用品牌任何頁面的瀏覽型回答中,比率降到 24 個中的 9 個。
反過來就不成立了。有 119 個回答提及品牌,其中只有 94 個的來源中有品牌自己的頁面,占 79.0%。五分之一的回答在沒有擷取品牌任何內容的情況下提及了品牌,這是模型根據既有知識在運作。
在我們的資料中,讓您自己的一個網址進入擷取集合,幾乎就足以獲得提及,但從來不是必要條件。從 97 個回答,我們無法斷言其中的因果關係。
我們實際會怎麼做
依序,最便宜的先做。
- 在依據提及率採取行動之前,先依回答是否擷取了任何內容來拆分它。用一個數字涵蓋兩個群體就是錯誤所在。
- 對於沒有擷取任何內容的回答,這週改寫頁面不會讓它們有所改變。那是模型的先驗知識,它的變化速度取決於整個網路談論您的時間尺度。
- 對於有擷取的回答,請閱讀它們使用的來源。在 AI Overviews 上,每個問題大約是八個頁面,而且會明確指出是誰取代您被擷取。
- 問任何向您報出 AI 能見度分數的工具,它計算的是這兩者中的哪一個。如果它答不出來,這個數字就是兩種不同失敗的平均。
這可能在哪裡出錯
最大的保留意見來自我們,而不是引擎。我們的 ChatGPT 引擎附上網路搜尋工具,並把 tool_choice 保持在 auto,只對看起來屬於商業或時效性的 prompt 強制搜尋,所以 68% 沒有搜尋的比例,部分是我們自己政策的產物。真實的 ChatGPT 工作階段會自行安排搜尋,瀏覽的頻率可能比我們的抽樣器所引發的更高。同一 prompt 內的比較不受影響,因為兩邊都在相同的政策下執行,這也是我們願意背書的數字。
四個品牌、三個帳戶的樣本很薄,而其中兩個品牌提供了大部分回答。評分集合也只是子集:它涵蓋的是提及擷取已為該品牌產生一列資料的執行,即 1,047 次 ChatGPT 執行中的 226 次。搜尋次數來自保存的回應中的搜尋呼叫項目,包括失敗的呼叫,所以是上限。
還有一點,是 OpenAI 自己記載的:行內引用並不是完整的擷取內容。他們的 sources 欄位會回傳模型參考過的每個網址,並註明它通常比引用清單更長。我們讀的是引用,所以「您的頁面不在來源中」的意思是「不在我們看得到的來源中」,自家網域真正的擷取率高於我們量測到的數字。AI Overview 的資料是透過 DataForSEO 取得的,我們沒有自己重新算繪那些搜尋。