Google-Extended とは?
Google-Extended は robots.txt のトークンで、Google がクロールしたコンテンツを今後の Gemini モデルの学習や Gemini の回答のグラウンディングに使ってよいかを制御し、Google 検索には一切影響しません。 Google-Extended は robots.txt で最も誤解されている行です。制御するのは、検索の外での Gemini の学習とグラウンディングです。Google 検索の一部である AI Overviews や AI Mode は制御しません。
Google-Extended は何を制御する?
Google があなたのサイトからクロールしたコンテンツを、Gemini アプリや Vertex AI の Gemini API を支える将来の Gemini モデルの学習に使ってよいか、また Gemini アプリでのグラウンディングと Vertex AI の Grounding with Google Search に使ってよいかを制御します(Google のクローラーのドキュメント、2026年7月14日更新)。
Google はそこでグラウンディングを、事実性と関連性を高めるために、プロンプトの時点で Google 検索のインデックスのコンテンツをモデルに渡すことだと説明しています。
Google-Extended をブロックすると Google 検索や AI Overviews に影響する?
しません。Google は、Google-Extended はサイトの Google 検索への掲載に影響せず、Google 検索のランキングシグナルとしても使われないと明言しています。
AI Overviews と AI Mode は検索の機能です。表示されるには、ページがインデックスされ、スニペット付きで表示できる状態である必要があり、それを制限する手段は nosnippet、data-nosnippet、max-snippet、noindex です(Google Search Central、2026年10月15日に確認)。これらは通常の検索結果での表示も制限します。
Google-Extended はどう使う?
robots.txt にグループを追加します。Google-Extended には独自の HTTP user-agent 文字列がありません。Google は既存の user agent でクロールし、このトークンは制御としてのみ読まれるため、ログに現れることはありません。
# コンテンツを Gemini の学習とグラウンディングに使わせない
User-agent: Google-Extended
Disallow: /
# Google 検索(AI Overviews と AI Mode を含む)には影響しない
User-agent: Googlebot
Allow: /実例ではどういう意味がある?
公開されている Tesla の例(2026年10月4日)では、Google AI Overviews は25の購買者の質問への回答のうち16件で Tesla の名前を挙げ、youtube.com を20回、reddit.com を15回、tesla.com を1回引用しました。
これらのサイトのどれかに Google-Extended のルールがあっても、この回答のセットは変わらなかったはずです。AI Overviews は検索の上に成り立っているからです。そこで効くのは、インデックス、スニペットの適格性、そして質問に答えるページであることです。
Google-Extended の設定はどう確認する?
すべてのホストで公開中の robots.txt に Google-Extended のグループがあるかを読み、AI Overviews に載せたいページにスニペット制御が誤って追加されていないかを確かめます。無料のAIクローラーチェッカーは公開中の robots.txt を Google-Extended と他の AIエージェントについて読み取り、Proofsource のクローラーアクセスは継続的に確認します。
Google-Extendedについてのよくある質問
Google-Extended をブロックすると順位が下がる?
下がりません。Google はランキングシグナルとして使っておらず、Google 検索への掲載にも影響しないとしています。
AI Overviews から外れるにはどうする?
スニペット制御か noindex しかなく、どちらも通常の検索結果も制限します。AI Overviews 専用の除外手段はなく、Google-Extended もそれには当たりません。
サーバーログに Google-Extended が出てこないのはなぜ?
独自の user-agent 文字列がないからです。Google は既存の user agent でクロールし、Google-Extended は robots.txt の制御としてのみ読み取ります。
Google-Extended は Gemini の回答にも及ぶ?
Google の説明では、将来の Gemini モデルの学習と、Gemini アプリおよび Vertex AI でのグラウンディングが対象です。最新の範囲は Google のクローラーのドキュメントで確認してください。
関連用語
- Google AI Overviews
Google AI Overviews とは、Google が一部の検索結果の上に表示するAIが書いた要約で、参照元のページへのリンクが付いています。
- Google AI Mode
AI Mode は Google の対話型AI検索で、質問にはリンク付きの文章で回答が返り、さらに質問を続けることができます。
- robots.txt
robots.txt とは、ウェブサイトのルートに置くプレーンテキストのファイルで、Robots Exclusion Protocol(RFC 9309)に基づき、クローラーがどのパスを取得してよいかを伝えます。
- グラウンディング
グラウンディングとは、AIモデルの回答をリアルタイムの検索結果などの外部情報源に結び付け、その主張が記憶だけでなく取得したコンテンツに基づくようにすることです。
実例:Tesla、公開されているAIの回答、2026年10月4日:Proofsource による Tesla の初回スキャン。購買者の質問25問とブランドの質問5問を、4つのエンジンそれぞれで1問につき1回ずつ質問。1ブランドの小さなサンプルで、ベンチマークではなく例として示しています。
AI があなたを外している場所と、改善すべき点を確認。
どの購買者の質問があなたのブランドに言及しているか、代わりにどのブランドに言及しているか、何を改善すべきかを確認。200件の回答。25 Prompts/質問。主要AIエンジン。2日間。無料。 カード不要。