OAI-SearchBot là gì?
OAI-SearchBot là crawler của OpenAI dùng để đưa các website lên tính năng tìm kiếm của ChatGPT, và những website từ chối nó sẽ không được hiển thị trong câu trả lời tìm kiếm của ChatGPT. Trong bốn user agent mà OpenAI ghi nhận, đây là agent quyết định trang của bạn có thể xuất hiện làm nguồn trong tìm kiếm ChatGPT hay không. OpenAI khuyến nghị cho phép nó, tách biệt với GPTBot là agent thu thập dữ liệu huấn luyện.
Chuỗi user agent của OAI-SearchBot là gì?
OAI-SearchBot tự nhận diện bằng token sản phẩm OAI-SearchBot, và một nhóm trong robots.txt phải nêu đúng token đó. Khác với GPTBot, chuỗi đầy đủ của nó bắt đầu bằng một khối kiểu trình duyệt, và OpenAI lưu ý số phiên bản có thể thay đổi, nên hãy khớp theo token. Khi agent này lấy robots.txt của bạn, OpenAI cho biết chuỗi có thể mang thêm dấu hiệu robots.txt.
Để xác nhận yêu cầu là thật, hãy kiểm tra IP với openai.com/searchbot.json, danh sách OpenAI công bố cho agent này.
Đây là chuỗi đầy đủ theo tài liệu của OpenAI (tài liệu crawler của OpenAI, đọc ngày 15 tháng 10 năm 2026):
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbotOAI-SearchBot quyết định điều gì?
OAI-SearchBot quyết định tìm kiếm ChatGPT có thể hiển thị trang của bạn hay không. OpenAI cho biết nó được dùng để hiển thị trang web trong các tính năng tìm kiếm của ChatGPT, và các trang chọn không tham gia sẽ không được hiển thị trong câu trả lời tìm kiếm ChatGPT, dù vẫn có thể xuất hiện dưới dạng liên kết điều hướng.
OpenAI khuyến nghị cho phép OAI-SearchBot trong robots.txt và cho phép các yêu cầu từ dải IP được công bố. Quy tắc của nó tách biệt với GPTBot: cho phép OAI-SearchBot không đưa bạn vào quá trình huấn luyện.
OAI-SearchBot khác GPTBot thế nào?
OAI-SearchBot dành cho tìm kiếm và GPTBot dành cho huấn luyện. Hai quy tắc được đặt riêng, và OpenAI lấy chính sự tách biệt đó làm ví dụ: cho phép OAI-SearchBot để xuất hiện trong kết quả tìm kiếm, chặn GPTBot để giữ nội dung ngoài huấn luyện. Nếu cả hai được cho phép, OpenAI cho biết có thể dùng một lượt crawl cho cả hai mục đích.
| Agent | Mục đích | Danh sách IP được công bố |
|---|---|---|
| OAI-SearchBot | Hiển thị trang web trong tìm kiếm ChatGPT | openai.com/searchbot.json |
| GPTBot | Thu thập nội dung có thể huấn luyện các mô hình nền tảng của OpenAI | openai.com/gptbot.json |
| ChatGPT-User | Truy cập trang khi câu hỏi của người dùng hoặc một GPT Action cần đến | openai.com/chatgpt-user.json |
| OAI-AdsBot | Kiểm tra trang đích được gửi làm quảng cáo ChatGPT | openai.com/adsbot.json |
Làm thế nào để kiểm tra bạn đã cho phép OAI-SearchBot?
Hãy kiểm tra ba nơi, vì chỉ một nơi cũng có thể chặn OAI-SearchBot trong khi những nơi khác trông vẫn ổn:
- robots.txt: không có nhóm nào nêu OAI-SearchBot chặn các trang của bạn, và không có quy tắc chung User-agent: * nào chặn nó mà không có nhóm OAI-SearchBot ghi đè.
- CDN hoặc tường lửa: không có thiết lập chặn bot nào từ chối yêu cầu của OAI-SearchBot hoặc dải IP được công bố trước khi robots.txt được đọc.
- Chính trang đó: văn bản bạn muốn được trích dẫn nằm trong HTML, không chỉ được thêm vào sau khi JavaScript chạy.
- Sau đó hãy chờ: OpenAI cho biết thay đổi robots.txt có thể mất khoảng 24 giờ để thể hiện trong kết quả tìm kiếm.
# Cho phép tìm kiếm ChatGPT, giữ nội dung ngoài huấn luyện
User-agent: OAI-SearchBot
Allow: /
User-agent: GPTBot
Disallow: /Điều này có ý nghĩa gì với việc được trích dẫn trong ChatGPT?
Trong ví dụ Tesla công khai (ngày 4 tháng 10 năm 2026), ChatGPT trích dẫn tesla.com 12 lần trong 93 trích dẫn trên 25 câu hỏi của người mua, khoảng 13%, tỷ lệ cao nhất trong bốn công cụ. Ba công cụ còn lại cộng lại chỉ trích dẫn tesla.com 5 lần trong 915.
Theo mô tả của chính OpenAI, một trang chọn không tham gia OAI-SearchBot không thể là một trong các nguồn đó. Công cụ kiểm tra crawler AI miễn phí đọc robots.txt đang chạy của bạn cho OAI-SearchBot và các agent AI khác chỉ trong vài giây; còn việc ChatGPT sau đó có nêu tên bạn hay không được đo bằng cách đặt câu hỏi. Xem cách ChatGPT chọn các thương hiệu nó nêu tên.
Câu hỏi thường gặp về OAI-SearchBot
Cho phép OAI-SearchBot có khiến OpenAI huấn luyện trên nội dung của tôi không?
Không. OpenAI cho biết mỗi thiết lập robots.txt độc lập: huấn luyện là quy tắc của GPTBot. Nếu bạn cho phép cả hai, OpenAI cho biết có thể dùng một lượt crawl cho cả hai mục đích, nên hãy chặn GPTBot nếu bạn không muốn nội dung được dùng để huấn luyện.
Thay đổi robots.txt mất bao lâu để có hiệu lực với tìm kiếm ChatGPT?
OpenAI cho biết hệ thống của họ có thể cần khoảng 24 giờ kể từ khi robots.txt được cập nhật để điều chỉnh kết quả tìm kiếm.
Nếu tôi chặn OAI-SearchBot, trang của tôi có còn xuất hiện trong ChatGPT không?
OpenAI cho biết các trang chọn không tham gia không được hiển thị trong câu trả lời tìm kiếm ChatGPT, nhưng vẫn có thể xuất hiện dưới dạng liên kết điều hướng. ChatGPT-User cũng có thể mở một trang mà người dùng hỏi đến, và OpenAI cho biết quy tắc robots.txt có thể không áp dụng cho lượt truy cập do người dùng khởi tạo đó.
OAI-SearchBot có chạy JavaScript không?
Trang crawler của OpenAI không nói đến. Hãy đặt văn bản bạn muốn được trích dẫn trong HTML do máy chủ gửi, để không crawler nào phải chạy script mới đọc được.
Thuật ngữ liên quan
- GPTBot
GPTBot là crawler web của OpenAI dùng để thu thập nội dung có thể được dùng để huấn luyện các mô hình nền tảng AI tạo sinh của OpenAI.
- ClaudeBot
ClaudeBot là crawler web của Anthropic, thu thập nội dung web có thể góp phần huấn luyện các mô hình Claude của Anthropic.
- PerplexityBot
PerplexityBot là crawler của Perplexity, lập chỉ mục các trang web để chúng có thể được hiển thị và liên kết trong kết quả tìm kiếm của Perplexity.
Ví dụ thực tế: Tesla, câu trả lời AI công khai, 4/10/2026: lượt quét đầu tiên của Proofsource cho Tesla, 25 câu hỏi của người mua và 5 câu hỏi về thương hiệu, một câu trả lời cho mỗi câu hỏi trên mỗi công cụ trong bốn công cụ AI. Một mẫu nhỏ của một thương hiệu, đưa ra làm ví dụ, không phải chuẩn so sánh.
Xem AI bỏ sót bạn ở đâu, và cần sửa gì.
Xem câu hỏi nào của người mua nêu tên thương hiệu của bạn, ai được nêu tên thay bạn, và cần sửa gì. 200 câu trả lời. 25 Prompts/câu hỏi. Các công cụ AI hàng đầu. 2 ngày. Miễn phí. Không cần thẻ.
Google AI OverviewsGoogle AI Mode
