Wat is OAI-SearchBot?
OAI-SearchBot is de crawler van OpenAI die websites zichtbaar maakt in de zoekfuncties van ChatGPT; sites die hem uitsluiten, worden niet getoond in de zoekantwoorden van ChatGPT. Van de vier user agents die OpenAI documenteert, is dit degene die bepaalt of je pagina’s als bron in ChatGPT search kunnen verschijnen. OpenAI raadt aan hem toe te staan, los van GPTBot, dat trainingsdata verzamelt.
Wat is de user-agentstring van OAI-SearchBot?
OAI-SearchBot maakt zich bekend met het producttoken OAI-SearchBot, en dat token moet een robots.txt-groep noemen. Anders dan bij GPTBot begint de volledige string met een browserachtig blok, en OpenAI merkt op dat de versienummers kunnen veranderen, dus match op het token. Als hij je robots.txt ophaalt, kan de string volgens OpenAI een extra robots.txt-markering bevatten.
Wil je bevestigen dat een verzoek echt is, vergelijk het IP dan met openai.com/searchbot.json, de lijst die OpenAI voor deze agent publiceert.
Dit is de volledige string die de documentatie van OpenAI geeft (crawlerdocumentatie van OpenAI, gelezen op 15 okt. 2026):
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbotWat bepaalt OAI-SearchBot?
OAI-SearchBot bepaalt of ChatGPT search je site kan tonen. Volgens OpenAI wordt hij gebruikt om websites te tonen in de zoekfuncties van ChatGPT, en sites die hem weigeren worden niet getoond in de antwoorden van ChatGPT search, al kunnen ze nog als navigatielink verschijnen.
OpenAI raadt aan OAI-SearchBot toe te staan in robots.txt en verzoeken vanaf zijn gepubliceerde IP-reeksen toe te laten. Zijn regel staat los van die van GPTBot: OAI-SearchBot toestaan betekent niet dat je instemt met training.
Hoe verschilt OAI-SearchBot van GPTBot?
OAI-SearchBot is voor zoeken en GPTBot voor training. De twee regels stel je apart in, en OpenAI geeft die splitsing zelf als voorbeeld: sta OAI-SearchBot toe om in zoekresultaten te verschijnen, blokkeer GPTBot om content buiten training te houden. Sta je beide toe, dan kan OpenAI volgens eigen zeggen één crawl voor beide doelen gebruiken.
| Agent | Doel | Gepubliceerde IP-lijst |
|---|---|---|
| OAI-SearchBot | Toont websites in ChatGPT search | openai.com/searchbot.json |
| GPTBot | Crawlt content die de basismodellen van OpenAI kan trainen | openai.com/gptbot.json |
| ChatGPT-User | Bezoekt een pagina als de vraag van een gebruiker of een GPT Action dat vraagt | openai.com/chatgpt-user.json |
| OAI-AdsBot | Controleert landingspagina’s die als ChatGPT-advertentie zijn ingediend | openai.com/adsbot.json |
Hoe controleer je of je OAI-SearchBot toestaat?
Controleer deze plekken, want elk ervan kan OAI-SearchBot buitensluiten terwijl de rest in orde lijkt:
- robots.txt: geen groep met OAI-SearchBot die je pagina’s weigert, en geen algemene User-agent: *-regel die ze blokkeert zonder een OAI-SearchBot-groep die hem overschrijft.
- Je CDN of firewall: geen bot-blokkade die verzoeken van OAI-SearchBot of zijn gepubliceerde IP-reeksen weigert voordat robots.txt zelfs wordt gelezen.
- De pagina zelf: de tekst die je vermeld wilt zien staat in de HTML, en wordt niet pas toegevoegd nadat JavaScript draait.
- Geef het dan tijd: volgens OpenAI kan het ongeveer 24 uur duren voordat wijzigingen in robots.txt in de zoekresultaten zichtbaar zijn.
# Sta ChatGPT search toe, houd content buiten training
User-agent: OAI-SearchBot
Allow: /
User-agent: GPTBot
Disallow: /Wat betekent dit voor bronvermeldingen in ChatGPT?
In het openbare Tesla-voorbeeld (4 okt 2026) vermeldde ChatGPT tesla.com 12 keer op 93 bronvermeldingen bij 25 koopvragen, ongeveer 13%, het hoogste aandeel van de vier engines. De andere drie vermeldden tesla.com samen 5 keer op 915.
Een site die OAI-SearchBot weigert, kan volgens de eigen beschrijving van OpenAI niet tussen die bronnen staan. De gratis AI-crawlercheck leest je live robots.txt voor OAI-SearchBot en de andere AI-agents in een paar seconden; of ChatGPT je vervolgens noemt, meet je door het de vragen te stellen. Zie hoe ChatGPT de merken kiest die het noemt.
Veelgestelde vragen over OAI-SearchBot
Laat het toestaan van OAI-SearchBot OpenAI trainen op mijn content?
Nee. Volgens OpenAI staat elke robots.txt-instelling op zichzelf: training valt onder de regel van GPTBot. Sta je beide toe, dan kan OpenAI één crawl voor beide doelen gebruiken, dus blokkeer GPTBot als je geen gebruik voor training wilt.
Hoe lang duurt een wijziging in robots.txt voor ChatGPT search?
Volgens OpenAI kan het na een update van robots.txt ongeveer 24 uur duren voordat de systemen de zoekresultaten aanpassen.
Als ik OAI-SearchBot blokkeer, kan mijn site dan nog in ChatGPT verschijnen?
Volgens OpenAI worden sites die hem weigeren niet getoond in de antwoorden van ChatGPT search, maar kunnen ze nog als navigatielink verschijnen. ChatGPT-User kan ook een pagina openen waar een gebruiker naar vraagt, en volgens OpenAI gelden robots.txt-regels mogelijk niet voor die door gebruikers gestarte bezoeken.
Voert OAI-SearchBot JavaScript uit?
De crawlerpagina van OpenAI zegt het niet. Zet de tekst die je vermeld wilt zien in de HTML die de server stuurt, zodat geen enkele crawler scripts hoeft uit te voeren om hem te lezen.
Gerelateerde termen
- GPTBot
GPTBot is de webcrawler van OpenAI die content verzamelt die gebruikt kan worden om de generatieve AI-basismodellen van OpenAI te trainen.
- ClaudeBot
ClaudeBot is de webcrawler van Anthropic die webcontent verzamelt die kan bijdragen aan het trainen van de Claude-modellen van Anthropic.
- PerplexityBot
PerplexityBot is de crawler van Perplexity die webpagina’s indexeert, zodat ze in de zoekresultaten van Perplexity getoond en gelinkt kunnen worden.
Uitgewerkt voorbeeld: Tesla, openbare AI-antwoorden, 4 okt. 2026: de eerste scan van Tesla door Proofsource, met 25 koopvragen en 5 merkvragen, één antwoord per vraag op elk van vier engines. Een kleine steekproef van één merk, getoond als voorbeeld, niet als benchmark.
Zie waar AI je overslaat, en wat je moet verbeteren.
Zie welke koopvragen je merk noemen, wie in jouw plaats wordt genoemd en wat je moet verbeteren. 200 antwoorden. 25 Prompts/vraag. Top-AI-engines. 2 dagen. Gratis. Geen creditcard nodig.
Google AI OverviewsGoogle AI Mode
