GPTBot là gì?
GPTBot là crawler web của OpenAI dùng để thu thập nội dung có thể được dùng để huấn luyện các mô hình nền tảng AI tạo sinh của OpenAI. GPTBot là một trong bốn user agent mà OpenAI ghi nhận, và là agent duy nhất có nhiệm vụ huấn luyện. Chặn nó là báo cho OpenAI không dùng các trang của bạn để huấn luyện; điều đó không đưa bạn ra khỏi tìm kiếm ChatGPT, vốn là nhiệm vụ của OAI-SearchBot.
Chuỗi user agent của GPTBot là gì?
GPTBot tự nhận diện bằng token sản phẩm GPTBot, và một nhóm trong robots.txt phải nêu đúng token đó. OpenAI lưu ý rằng số phiên bản có thể thay đổi, nên hãy khớp token trong log thay vì toàn bộ chuỗi. OpenAI cũng cho biết có thể thêm một dấu hiệu robots.txt vào chuỗi khi GPTBot lấy robots.txt của bạn, để phân biệt yêu cầu đó.
Tên trong một dòng log có thể bị bất kỳ scraper nào sao chép. Để xác nhận yêu cầu là thật, hãy kiểm tra IP với danh sách OpenAI công bố tại openai.com/gptbot.json.
Đây là chuỗi đầy đủ theo tài liệu của OpenAI (tài liệu crawler của OpenAI, đọc ngày 15 tháng 10 năm 2026):
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; GPTBot/1.4; +https://openai.com/gptbotGPTBot làm gì, và không làm gì?
GPTBot thu thập nội dung có thể được dùng để huấn luyện các mô hình nền tảng AI tạo sinh của OpenAI, và đó là tất cả những gì OpenAI nói về nhiệm vụ của nó. Chặn nó trong robots.txt cho biết nội dung trang của bạn không nên được dùng cho việc huấn luyện đó.
Những gì nó không làm quan trọng hơn đối với mức độ hiển thị:
- GPTBot không quyết định trang của bạn có xuất hiện trong tìm kiếm ChatGPT hay không. OpenAI gắn việc đó với OAI-SearchBot.
- GPTBot không phải agent mở trang khi ai đó hỏi ChatGPT về trang đó. Đó là ChatGPT-User.
- Quy tắc của nó tách biệt với các agent khác: OpenAI cho biết mỗi thiết lập robots.txt hoạt động độc lập.
- Nếu bạn cho phép cả GPTBot và OAI-SearchBot, OpenAI cho biết có thể dùng một lượt crawl cho cả hai mục đích.
GPTBot khác OAI-SearchBot và ChatGPT-User thế nào?
Mỗi agent có nhiệm vụ khác nhau, nên một dòng robots.txt không thể thay cho dòng khác. Đây là sai lầm đằng sau quy tắc phổ biến chặn GPTBot với suy nghĩ rằng nó giữ trang ngoài ChatGPT; chặn GPTBot không xóa bạn khỏi ChatGPT.
| Agent | Nhiệm vụ | Nếu bạn chặn nó |
|---|---|---|
| GPTBot | Thu thập nội dung có thể được dùng để huấn luyện các mô hình nền tảng của OpenAI | Báo hiệu rằng nội dung của bạn không nên được dùng để huấn luyện |
| OAI-SearchBot | Hiển thị trang web trong các tính năng tìm kiếm của ChatGPT | Không được hiển thị trong câu trả lời tìm kiếm ChatGPT, dù liên kết điều hướng vẫn có thể xuất hiện |
| ChatGPT-User | Truy cập trang khi người dùng hỏi ChatGPT hoặc một GPT tùy chỉnh, hoặc qua GPT Actions | OpenAI cho biết quy tắc robots.txt có thể không áp dụng, vì lượt truy cập do người dùng khởi tạo |
| OAI-AdsBot | Kiểm tra độ an toàn của trang đích được gửi làm quảng cáo trên ChatGPT | Không liên quan trừ khi bạn chạy quảng cáo ChatGPT; nó chỉ truy cập các trang quảng cáo đã gửi |
Làm thế nào để chặn hoặc cho phép GPTBot trong robots.txt?
Nêu tên GPTBot trong một nhóm riêng trong robots.txt ở gốc trang của bạn. Một lựa chọn phổ biến là chặn GPTBot và cho phép OAI-SearchBot: không cho huấn luyện, có cho tìm kiếm ChatGPT.
OpenAI cho biết thay đổi robots.txt có thể mất khoảng 24 giờ để thể hiện trong kết quả tìm kiếm. Quy tắc cũng có thể bị ghi đè ở lớp biên: thiết lập bot của CDN hoặc tường lửa có thể chặn một agent mà robots.txt của bạn cho phép. Hãy kiểm tra cả hai bằng công cụ kiểm tra crawler AI miễn phí.
# Không cho huấn luyện
User-agent: GPTBot
Disallow: /
# Có cho tìm kiếm ChatGPT
User-agent: OAI-SearchBot
Allow: /Điều này có ý nghĩa gì với việc được trích dẫn trong ChatGPT?
Trong ví dụ Tesla công khai (ngày 4 tháng 10 năm 2026), ChatGPT trích dẫn chính trang của thương hiệu thường xuyên hơn nhiều so với các công cụ khác: tesla.com 12 lần trong 93 trích dẫn trên 25 câu hỏi của người mua, khoảng 13%, trong khi ba công cụ còn lại cộng lại chỉ trích dẫn 5 lần trong 915.
Các liên kết đó đến từ tính năng tìm kiếm của ChatGPT, mà OpenAI gắn với OAI-SearchBot, không phải GPTBot. Chặn GPTBot không ảnh hưởng đến chúng; chặn OAI-SearchBot thì có. Xem cách ChatGPT chọn các thương hiệu nó nêu tên.
Câu hỏi thường gặp về GPTBot
Chặn GPTBot có xóa trang của tôi khỏi ChatGPT không?
Không. GPTBot là crawler huấn luyện. OpenAI cho biết các trang chọn không tham gia OAI-SearchBot không được hiển thị trong câu trả lời tìm kiếm ChatGPT; GPTBot không có vai trò đó. Mỗi thiết lập robots.txt độc lập với nhau.
Chặn GPTBot có xóa nội dung OpenAI đã thu thập không?
Trang crawler của OpenAI mô tả quy tắc GPTBot là tín hiệu rằng nội dung của bạn không nên được dùng để huấn luyện. Trang đó không nói gì về nội dung đã thu thập trước khi quy tắc được thêm, nên đừng mặc định điều đó.
Làm sao tôi biết một yêu cầu thực sự đến từ GPTBot?
Kiểm tra IP nguồn với danh sách OpenAI công bố tại openai.com/gptbot.json. Riêng chuỗi user agent có thể bị bất kỳ scraper nào sao chép.
GPTBot có giống ChatGPT-User không?
Không. ChatGPT-User truy cập trang khi ai đó hỏi ChatGPT hoặc một GPT tùy chỉnh điều gì đó, và OpenAI cho biết nó không được dùng để crawl tự động. Vì lượt truy cập do người dùng khởi tạo, quy tắc robots.txt có thể không áp dụng cho nó.
Thuật ngữ liên quan
- OAI-SearchBot
OAI-SearchBot là crawler của OpenAI dùng để đưa các website lên tính năng tìm kiếm của ChatGPT, và những website từ chối nó sẽ không được hiển thị trong câu trả lời tìm kiếm của ChatGPT.
- ClaudeBot
ClaudeBot là crawler web của Anthropic, thu thập nội dung web có thể góp phần huấn luyện các mô hình Claude của Anthropic.
- PerplexityBot
PerplexityBot là crawler của Perplexity, lập chỉ mục các trang web để chúng có thể được hiển thị và liên kết trong kết quả tìm kiếm của Perplexity.
Ví dụ thực tế: Tesla, câu trả lời AI công khai, 4/10/2026: lượt quét đầu tiên của Proofsource cho Tesla, 25 câu hỏi của người mua và 5 câu hỏi về thương hiệu, một câu trả lời cho mỗi câu hỏi trên mỗi công cụ trong bốn công cụ AI. Một mẫu nhỏ của một thương hiệu, đưa ra làm ví dụ, không phải chuẩn so sánh.
Xem AI bỏ sót bạn ở đâu, và cần sửa gì.
Xem câu hỏi nào của người mua nêu tên thương hiệu của bạn, ai được nêu tên thay bạn, và cần sửa gì. 200 câu trả lời. 25 Prompts/câu hỏi. Các công cụ AI hàng đầu. 2 ngày. Miễn phí. Không cần thẻ.
Google AI OverviewsGoogle AI Mode
