Google-Extended là gì?
Google-Extended là một token robots.txt kiểm soát việc nội dung Google thu thập có được dùng để huấn luyện các mô hình Gemini sau này và làm cơ sở cho câu trả lời của Gemini hay không, mà không ảnh hưởng gì đến Google Search. Google-Extended là dòng robots.txt bị hiểu sai nhiều nhất. Nó kiểm soát việc huấn luyện và grounding của Gemini bên ngoài Search. Nó không kiểm soát AI Overviews hay AI Mode, vốn là một phần của Google Search.
Google-Extended kiểm soát điều gì?
Nó kiểm soát việc nội dung Google thu thập từ trang của bạn có được dùng để huấn luyện các mô hình Gemini tương lai vận hành Gemini Apps và Vertex AI API cho Gemini hay không, và cho việc grounding trong Gemini Apps và Grounding with Google Search của Vertex AI (tài liệu crawler của Google, cập nhật ngày 14 tháng 7 năm 2026).
Google mô tả grounding đó là cung cấp cho mô hình nội dung từ chỉ mục Google Search tại thời điểm nhận prompt để cải thiện độ chính xác và mức độ liên quan.
Chặn Google-Extended có ảnh hưởng đến Google Search hay AI Overviews không?
Không. Google khẳng định Google-Extended không ảnh hưởng đến việc một trang web được đưa vào Google Search và không được dùng làm tín hiệu xếp hạng trong đó.
AI Overviews và AI Mode là tính năng của Search: một trang phải được lập chỉ mục và đủ điều kiện hiển thị kèm đoạn trích mới có thể xuất hiện trong đó, và các kiểm soát giới hạn chúng là nosnippet, data-nosnippet, max-snippet và noindex (Google Search Central, đọc ngày 15 tháng 10 năm 2026). Các kiểm soát đó cũng giới hạn cách trang hiển thị trong kết quả thông thường.
Dùng Google-Extended như thế nào?
Thêm một nhóm cho nó trong robots.txt. Google-Extended không có chuỗi user-agent HTTP riêng: Google thu thập bằng các user agent thông thường và token này chỉ được đọc như một kiểm soát, nên bạn sẽ không thấy nó trong nhật ký của mình.
# Không dùng để huấn luyện và grounding Gemini
User-agent: Google-Extended
Disallow: /
# Google Search, kể cả AI Overviews và AI Mode, không bị ảnh hưởng
User-agent: Googlebot
Allow: /Điều này có ý nghĩa gì trong một ví dụ thực tế?
Trong ví dụ Tesla công khai (4 tháng 10 năm 2026), Google AI Overviews nêu tên Tesla trong 16 trên 25 câu trả lời cho câu hỏi của người mua và trích dẫn youtube.com 20 lần, reddit.com 15 lần và tesla.com một lần.
Một quy tắc Google-Extended trên bất kỳ trang nào trong số đó cũng sẽ không thay đổi tập câu trả lời này, vì AI Overviews được xây dựng trên Search. Ở đó, đòn bẩy là việc lập chỉ mục, điều kiện hiển thị đoạn trích, và trở thành trang trả lời câu hỏi.
Kiểm tra thiết lập Google-Extended như thế nào?
Tìm nhóm Google-Extended trong robots.txt đang chạy của bạn, trên mọi host, và đảm bảo bạn không vô tình thêm kiểm soát đoạn trích trên những trang bạn muốn có trong AI Overviews. Công cụ kiểm tra crawler AI miễn phí đọc robots.txt đang chạy của bạn để tìm Google-Extended và các agent AI khác, và Quyền truy cập của crawler trong Proofsource kiểm tra chúng theo thời gian.
Câu hỏi thường gặp về Google-Extended
Chặn Google-Extended có làm giảm thứ hạng của tôi không?
Không. Google cho biết nó không được dùng làm tín hiệu xếp hạng và không ảnh hưởng đến việc được đưa vào Google Search.
Làm thế nào để tôi không xuất hiện trong AI Overviews?
Chỉ bằng kiểm soát đoạn trích hoặc noindex, vốn cũng giới hạn kết quả thông thường. Không có cơ chế loại trừ riêng cho AI Overviews, và Google-Extended không phải là cơ chế đó.
Vì sao tôi không thấy Google-Extended trong nhật ký máy chủ?
Vì nó không có chuỗi user-agent riêng. Google thu thập bằng các user agent thông thường và chỉ đọc Google-Extended như một kiểm soát trong robots.txt.
Google-Extended có bao gồm câu trả lời của Gemini không?
Nó bao gồm việc huấn luyện các mô hình Gemini tương lai và grounding trong Gemini Apps và Vertex AI, theo mô tả của Google. Hãy xem tài liệu crawler của Google để biết phạm vi hiện tại.
Thuật ngữ liên quan
- Google AI Overviews
Google AI Overviews là các bản tóm tắt do AI viết mà Google hiển thị phía trên một số kết quả tìm kiếm, kèm liên kết đến các trang được dùng làm nguồn.
- Google AI Mode
AI Mode là trải nghiệm tìm kiếm AI dạng hội thoại của Google, nơi một câu hỏi nhận được câu trả lời viết sẵn kèm liên kết và có thể được hỏi tiếp bằng các câu hỏi khác.
- robots.txt
robots.txt là một tệp văn bản thuần ở thư mục gốc của website, cho các crawler biết những đường dẫn nào chúng được phép tải, theo Robots Exclusion Protocol (RFC 9309).
- Grounding
Grounding là gắn câu trả lời của mô hình AI với các nguồn bên ngoài, như kết quả tìm kiếm trực tiếp, để các khẳng định của nó dựa trên nội dung được truy xuất thay vì chỉ dựa vào trí nhớ.
Ví dụ thực tế: Tesla, câu trả lời AI công khai, 4/10/2026: lượt quét đầu tiên của Proofsource cho Tesla, 25 câu hỏi của người mua và 5 câu hỏi về thương hiệu, một câu trả lời cho mỗi câu hỏi trên mỗi công cụ trong bốn công cụ AI. Một mẫu nhỏ của một thương hiệu, đưa ra làm ví dụ, không phải chuẩn so sánh.
Xem AI bỏ sót bạn ở đâu, và cần sửa gì.
Xem câu hỏi nào của người mua nêu tên thương hiệu của bạn, ai được nêu tên thay bạn, và cần sửa gì. 200 câu trả lời. 25 Prompts/câu hỏi. Các công cụ AI hàng đầu. 2 ngày. Miễn phí. Không cần thẻ.