ChatGPT の回答の3分の2は、ウェブを一度も検索していなかった
ChatGPT が自社ブランドに言及しない理由を検索すると、いつも同じリストが出てきます。権威性を高めよ、ChatGPT が信頼するまとめ記事に載れ。どの項目も、モデルが自社カテゴリについて何かを読み、自社を誰かより下に順位付けたことを前提にしています。実際には、多くの場合、何も読んでいませんでした。
2026年8月22日から10月1日にかけて、回答がどのブランドに言及したか、どのページを引用したかの両方を確認できた、完了済みの回答364件を採点しました。隣接するB2Bソフトウェアのカテゴリで、3つのアカウントの4ブランドです。引用を返す2つのエンジンを対象にしました。Google AI Overviews と、ウェブ検索ツールを付けて OpenAI の API を呼び出す私たちの ChatGPT エンジンです。狭い切り口なので、ここでのすべての数値は私たちのものとしてお読みください。
- そのうち226件は ChatGPT エンジンの回答で、215件ではモデルが実行したウェブ検索の回数が保存されていました。
- 215件のうち147件は検索をゼロ回実行しており、何も取得していませんでした。68%です。
- 68件は1回か2回検索していました。
検索したかどうかで、言及率は6%から78%に動いた
何も検索しなかった147件の回答のうち、ブランドに言及したのは9件でした。6.1%で、95%信頼区間は3.3%〜11.2%です。検索した68件のうち53件が言及しました。77.9%で、区間は66.7%〜86.2%です。区間は触れ合うほども近づいていません。
当然の反論は、それぞれ別の質問だということです。モデルは定義を問う質問より商用の比較で検索しやすく、前者よりも後者でベンダーを挙げやすいはずです。そこで、繰り返し尋ねられ、両方のパターンになったことのある9件の Prompts を取り出し、同じ質問同士で比べました。ブラウジングした実行では23件中18件、78.3%でブランドに言及しました。ブラウジングしなかった実行では29件中7件、24.1%でした。差は小さくなりますが方向は同じで、区間はなお重なりません。
6%ではなく24%を、誠実な下限と考えてください。モデルが何かを調べたかどうかは、あなたに言及する回答とそうでない回答を分けるものとして私たちが見つけた最大の要因で、あなたのページとは何の関係もありません。
検索するかどうかはモデルが判断し、Prompt ごとに決まる
これについて出回っているアドバイスは、数年古くなっています。広く読まれているあるガイドは、各 Prompt を通常のチャットで1回、ブラウジングをオンにして1回、計2回実行するよう勧めていますが、これは読み手が選べるかのような前提です。別のガイドは、ChatGPT は「特定の文書を取得しない」で学習パターンから答えると説明していますが、これは検索が行われなかった回答のことしか述べていません。
OpenAI の API ドキュメントはもっと率直です。ウェブ検索ツールを付けると、それが使える状態になり、同社の言葉では、モデルは入力された Prompt の内容に基づいて、ウェブを検索するかどうかを選べます。tool_choice が auto なら検索は任意で、必ず検索させたい場合は tool_choice を required にする必要があります。誰かがスイッチを切り替えるわけではありません。モデルが Prompt ごとに判断し、同じ質問でも2回で違う判断をすることがあります。
つまり、あなたの可視性の数値は、2つの集団を足し合わせたものです。調べたうえであなたを外した回答と、まったく調べなかった回答です。問題も改善策も別物なのに、1つの割合が両方を隠しています。
Google AI Overviews には「調べない」という選択肢がない
もう一方のエンジンの挙動はまったく違いました。採点した138件の AI Overview の回答のうち81件はブランドに言及しませんでしたが、81件すべてがそれでもほかのページを引用していました。回答あたりの情報源の中央値は8で、最大16です。
そのため、AI Overviews での「言及なし」は読み解きやすいものです。その質問に8つのページが取り込まれ、そのどれもあなたのものではなかったのです。Google のガイダンスによると、ページはインデックスされ、スニペット付きで表示できれば裏付けのリンクの対象となり、追加の要件はありません。そしてすべての要件を満たしても、Google がクロール、インデックス、表示するとは限りません。Google はまた、AI Overviews は従来の検索に付加価値があるとシステムが判断した場合にだけ表示されるとしており、表示されないことも多くあります。この非表示は3つ目の結果で、これらの件数には含まれていません。
ブランド自身のページを引用した97件の回答のうち、94件がブランドにも言及していた
取得の側から見ると、関係は偏っています。両方のエンジンで、ブランド自身のドメインのページを情報源リストに入れた回答は97件で、そのうち94件がブランドに言及していました。96.9%で、区間は91.3%〜98.9%です。ChatGPT エンジンでは44件中44件でした。ブランドのページを1つも引用しなかったブラウジングの回答では、24件中9件に下がりました。
逆方向には成り立ちません。ブランドに言及した回答は119件で、そのうち自社のページが情報源にあったのは94件、79.0%でした。5件に1件は、ブランドのものを何も取得せずにブランドに言及しており、これはモデルがすでに知っていることから答えているということです。
私たちのデータでは、自社の URL を1つ取得の集合に入れることは、言及にほぼ十分な条件でしたが、必要条件ではありませんでした。97件の回答から、これを因果と言うことはできません。
私たちなら実際にこうする
安上がりなものから順に。
- 行動する前に、回答が何かを取得したかどうかで言及率を分けましょう。2つの集団をまたいだ1つの数値が間違いのもとです。
- 何も取得しなかった回答は、今週ページを書き直しても動きません。それはモデルの事前知識で、ウェブ全体があなたについて語る時間軸でしか変わりません。
- 取得した回答については、使われた情報源を読みましょう。AI Overviews なら質問ごとにおよそ8ページで、あなたの代わりに誰が取り込まれたかがはっきり分かります。
- AI可視性スコアを示してくるツールには、この2つのどちらを数えているのかを尋ねましょう。答えられないなら、その数値は2種類の失敗の平均です。
この分析が誤っている可能性がある点
最大の注意点はエンジンではなく私たちの側にあります。私たちの ChatGPT エンジンはウェブ検索ツールを付けたうえで tool_choice を auto のままにしており、商用や最新性を重視すると読める Prompts でだけ検索を強制しています。そのため、何も検索しなかった68%は、部分的には私たち自身の方針の産物です。実際の ChatGPT のセッションは自ら検索の経路を決めており、私たちのサンプラーが促すより頻繁にブラウジングするかもしれません。同じ Prompt 内での比較は、両側が同じ方針で実行されているため影響を受けません。私たちが自信を持って示せるのはその数値です。
4ブランドと3アカウントは少なく、そのうち2ブランドが回答の大部分を占めていました。採点した集合も一部です。言及の抽出がブランドの行を作成していた実行が対象で、ChatGPT の1,047回の実行のうち226回です。検索回数は保存されたレスポンス内の検索呼び出しの項目から数えており、失敗したものも含むため、上限値です。
もう1つ、OpenAI 自身が文書化している点があります。インラインの引用は、取得のすべてではありません。sources フィールドはモデルが参照したすべての URL を返し、それは引用リストより長いことが多いと記載されています。私たちが読んでいるのは引用なので、「あなたのページは情報源になかった」とは「私たちに見える情報源になかった」という意味で、自社ドメインの実際の取得率は私たちの測定値より上にあります。AI Overview のデータは DataForSEO 経由で届いており、私たち自身がそれらの検索を再レンダリングしたわけではありません。
