Vindbaar blijven nu AI steeds vaker het antwoord geeft
Zoekmachines en AI-assistenten geven steeds vaker zelf antwoord. Wat verandert er voor je vindbaarheid, en waar kun je als organisatie op sturen?
Artikel
Inhoud
Laatst gecontroleerd: 5 oktober 2026
OAI-SearchBot is de crawler van OpenAI die websites ophaalt om ze te tonen in de zoekfuncties van ChatGPT. GPTBot is een andere crawler, bedoeld voor het trainen en verbeteren van de AI-modellen van OpenAI. Je kunt ze los van elkaar toestaan of blokkeren, dus je kunt prima zichtbaar zijn in ChatGPT search zonder dat je content voor training wordt gebruikt.
OAI-SearchBot is volgens OpenAI de crawler die wordt gebruikt om websites te tonen in de zoekresultaten van ChatGPT's zoekfuncties. Als iemand in ChatGPT een vraag stelt waarvoor actuele webinformatie nodig is, kan ChatGPT pagina's gebruiken die OAI-SearchBot heeft opgehaald en daarnaar verwijzen.
Volgens OpenAI kan elke openbare website in ChatGPT search verschijnen, zolang OAI-SearchBot niet geblokkeerd is. Voor bedrijven die in ChatGPT gevonden willen worden, is deze bot dus de belangrijkste. Hoe ChatGPT search verder werkt, lees je in Hoe werkt ChatGPT search?
GPTBot is de crawler die OpenAI gebruikt om content te verzamelen voor het trainen en verbeteren van zijn generatieve foundation-modellen. Met een Disallow voor GPTBot in je robots.txt geef je aan dat je content niet voor training gebruikt mag worden.
ChatGPT-User werkt anders. OpenAI gebruikt deze user agent voor acties die een gebruiker zelf start, bijvoorbeeld als iemand ChatGPT vraagt een bepaalde pagina te openen. Het is geen bot die automatisch het web afloopt. OpenAI geeft aan dat robots.txt-regels hiervoor mogelijk niet gelden. De IP-adressen staan in openai.com/chatgpt-user.json.
In de praktijk betekent dit: zie je ChatGPT-User in je serverlogs, dan heeft meestal een gebruiker jouw pagina laten bekijken. Dat is geen teken dat je crawlinstellingen niet werken.
Sinds OpenAI advertenties in ChatGPT test, is er ook OAI-AdsBot. Die bot controleert volgens OpenAI de veiligheid van webpagina's die als advertentie in ChatGPT zijn ingediend. Hij bezoekt alleen die ingediende pagina's, en de data wordt niet voor training gebruikt. De user agent bevat OAI-AdsBot/1.0. Adverteer je niet in ChatGPT, dan speelt deze bot voor jou geen rol. Adverteer je wel, dan moet je hem toelaten. Meer daarover in OAI-AdsBot uitgelegd.
Pas je robots.txt aan, houd er dan rekening mee dat het volgens OpenAI ongeveer 24 uur kan duren voordat de zoeksystemen van ChatGPT de wijziging verwerken.
OpenAI geeft aan dat de instellingen onafhankelijk zijn. Je kunt dus per bot kiezen. Dit zijn de drie varianten die wij het vaakst tegenkomen.
Je wilt zichtbaar zijn in ChatGPT search en hebt geen bezwaar tegen training.
User-agent: OAI-SearchBot
Allow: /
User-agent: GPTBot
Allow: /
De meest gekozen middenweg: je wilt gevonden worden in ChatGPT, maar je content niet beschikbaar stellen voor modeltraining.
User-agent: OAI-SearchBot
Allow: /
User-agent: GPTBot
Disallow: /
Je wilt niet dat OpenAI je site crawlt. Houd er rekening mee dat je dan niet in ChatGPT-zoekantwoorden verschijnt.
User-agent: OAI-SearchBot
Disallow: /
User-agent: GPTBot
Disallow: /
Let op: staat er ook een algemene regel voor alle user agents (User-agent: *) met een brede Disallow, controleer dan goed wat er voor deze bots overblijft. Hoe je je robots.txt controleert, lees je in robots.txt controleren.
Een correcte robots.txt is geen garantie dat de bot je site ook echt bereikt. Firewalls, botbeveiliging en CDN's kunnen crawlers tegenhouden. OpenAI wijst er in zijn richtlijnen voor adverteerders op dat veel websites diensten als Cloudflare of Akamai gebruiken tegen DDoS-aanvallen en scraping, en raadt aan OpenAI-crawlers daarin toe te laten, bij voorkeur op basis van user agent en botverificatie. Omdat user agents na te bootsen zijn, kun je de echte bots herkennen aan de IP-lijsten die OpenAI publiceert.
Stel: een webshop heeft robots.txt keurig ingesteld, maar de hostingpartij weert onbekende bots met een standaard beveiligingsregel. In de serverlogs komt OAI-SearchBot dan alleen met foutmeldingen voor. Pas na een allowlist op basis van de IP-lijst van OpenAI kan de bot de pagina's ophalen. Dit soort controles nemen wij standaard mee in een technische SEO-check.
Voor de meeste bedrijven die klanten willen trekken, is OAI-SearchBot toestaan de logische keuze: zonder die bot doe je niet mee in ChatGPT search. Over GPTBot kun je verschillend denken. Uitgevers en bedrijven met unieke, betaalde content kiezen vaak voor blokkeren. Dienstverleners en webshops die vooral gevonden willen worden, hebben daar minder reden toe. Het is een inhoudelijke keuze, geen technische, en volgens OpenAI heeft die keuze geen invloed op je zichtbaarheid in ChatGPT search.
De crawler van OpenAI die websites ophaalt zodat ze kunnen verschijnen in de zoekfuncties van ChatGPT.
Volgens OpenAI niet. Het blokkeren van GPTBot voorkomt niet dat je in ChatGPT search verschijnt. Daarvoor is OAI-SearchBot bepalend.
Alleen als je adverteert in ChatGPT. OpenAI geeft aan dat je OAI-AdsBot dan moet toestaan, en raadt aan om ook OAI-SearchBot toe te laten.
Twijfel je of OpenAI je website kan bereiken, of welke instelling bij je past? Vraag een gratis SEO & GEO Quickscan aan
Alle
artikelen