Google-Extended란 무엇인가요?
Google-Extended는 Google이 크롤링한 콘텐츠를 향후 Gemini 모델 학습과 Gemini 답변의 근거로 써도 되는지를 정하는 robots.txt 토큰이며, Google 검색에는 아무 영향이 없습니다. Google-Extended는 robots.txt에서 가장 오해받는 줄입니다. 검색 밖에서의 Gemini 학습과 그라운딩을 제어합니다. Google 검색의 일부인 AI Overviews나 AI Mode는 제어하지 않습니다.
Google-Extended는 무엇을 제어하나요?
Google이 우리 사이트에서 크롤링한 콘텐츠를 Gemini 앱과 Gemini용 Vertex AI API를 구동하는 향후 Gemini 모델의 학습에 쓸 수 있는지, 그리고 Gemini 앱의 그라운딩과 Vertex AI의 Grounding with Google Search에 쓸 수 있는지를 제어합니다(Google 크롤러 문서, 2026년 7월 14일 업데이트).
Google은 그곳에서 그라운딩을, 사실성과 관련성을 높이기 위해 프롬프트 시점에 Google 검색 색인의 콘텐츠를 모델에 제공하는 것으로 설명합니다.
Google-Extended를 차단하면 Google 검색이나 AI Overviews에 영향이 있나요?
아니요. Google은 Google-Extended가 사이트의 Google 검색 포함 여부에 영향을 주지 않으며, Google 검색의 순위 신호로도 쓰이지 않는다고 밝힙니다.
AI Overviews와 AI Mode는 검색 기능입니다. 여기에 나타나려면 페이지가 색인되어 있고 스니펫과 함께 표시될 수 있어야 하며, 이를 제한하는 제어 수단은 nosnippet, data-nosnippet, max-snippet, noindex입니다(Google Search Central, 2026년 10월 15일 확인). 이것들은 일반 검색 결과에서 페이지가 표시되는 방식도 제한합니다.
Google-Extended는 어떻게 사용하나요?
robots.txt에 이를 위한 그룹을 추가하세요. Google-Extended에는 별도의 HTTP 사용자 에이전트 문자열이 없습니다. Google은 기존 사용자 에이전트로 크롤링하고 이 토큰은 제어용으로만 읽으므로, 로그에서는 보이지 않습니다.
# 콘텐츠를 Gemini 학습과 그라운딩에서 제외
User-agent: Google-Extended
Disallow: /
# AI Overviews와 AI Mode를 포함한 Google 검색은 영향 없음
User-agent: Googlebot
Allow: /실제 사례에서는 무엇을 뜻하나요?
공개된 Tesla 사례(2026년 10월 4일)에서 Google AI Overviews 답변은 구매자 질문 25개 중 16개에서 Tesla를 언급했고, youtube.com을 20회, reddit.com을 15회, tesla.com을 1회 인용했습니다.
AI Overviews는 검색 위에 만들어지므로, 그 사이트들 중 어디에 Google-Extended 규칙이 있었더라도 이 답변들은 달라지지 않았을 것입니다. 여기서 쓸 수 있는 수단은 색인, 스니펫 표시 자격, 그리고 질문에 답하는 페이지가 되는 것입니다.
Google-Extended 설정은 어떻게 확인하나요?
모든 호스트의 실제 robots.txt에서 Google-Extended 그룹을 찾고, AI Overviews에 나오길 원하는 페이지에 스니펫 제어가 실수로 추가되지 않았는지 확인하세요. 무료 AI 크롤러 검사기는 실제 robots.txt에서 Google-Extended와 다른 AI 에이전트를 확인하며, Proofsource의 크롤러 접근 기능은 이를 지속적으로 점검합니다.
Google-Extended에 대해 자주 묻는 질문
Google-Extended를 차단하면 순위가 떨어지나요?
아니요. Google은 이를 순위 신호로 쓰지 않으며, Google 검색 포함 여부에도 영향을 주지 않는다고 밝힙니다.
AI Overviews에서 빠지려면 어떻게 하나요?
스니펫 제어나 noindex로만 가능하며, 이는 일반 검색 결과도 제한합니다. AI Overviews만 따로 빠지는 방법은 없고, Google-Extended도 그런 수단이 아닙니다.
서버 로그에서 Google-Extended가 보이지 않는 이유는 무엇인가요?
자체 사용자 에이전트 문자열이 없기 때문입니다. Google은 기존 사용자 에이전트로 크롤링하고, Google-Extended는 robots.txt 제어로만 읽습니다.
Google-Extended는 Gemini 답변에도 적용되나요?
Google의 설명에 따르면 향후 Gemini 모델의 학습과, Gemini 앱 및 Vertex AI의 그라운딩에 적용됩니다. 현재 범위는 Google 크롤러 문서에서 확인하세요.
관련 용어
- Google AI Overviews
Google AI Overviews는 Google이 일부 검색 결과 위에 보여 주는 AI 작성 요약으로, 근거로 삼은 페이지 링크가 함께 표시됩니다.
- Google AI Mode
AI Mode는 질문에 링크가 달린 서술형 답변을 주고 후속 질문으로 이어 갈 수 있는 Google의 대화형 AI 검색 경험입니다.
- robots.txt
robots.txt는 웹사이트 루트에 두는 텍스트 파일로, Robots Exclusion Protocol(RFC 9309)에 따라 크롤러가 가져갈 수 있는 경로를 알려 줍니다.
- Grounding
Grounding은 AI 모델의 답변을 실시간 검색 결과 같은 외부 출처에 근거하게 해, 주장이 기억만이 아니라 가져온 콘텐츠에 기반하도록 하는 것입니다.
실전 예시: Tesla, 공개 AI 답변, 2026년 10월 4일: Proofsource가 Tesla를 대상으로 한 첫 스캔으로, 구매자 질문 25개와 브랜드 질문 5개를 네 엔진에 각각 한 번씩 물었습니다. 한 브랜드의 작은 표본이며, 벤치마크가 아니라 예시로 보여 드립니다.
