Gratis tool

Blokkeer je per ongeluk ChatGPT, Claude of Perplexity?

Weigert je website AI-bots, via robots.txt of een verborgen WAF-instelling? Dan ben je onzichtbaar in hun antwoorden. Deze check test in 10 seconden of de grote AI-bots je site kunnen bereiken. Je krijgt per bot een stoplicht en concrete fixes. Gratis, zonder account.

Gratis, zonder account. We lezen alleen publiek beschikbare bestanden (robots.txt, llms.txt, sitemap).

Waarom bot-toegang de basis is van AI-zichtbaarheid

AI-antwoordmachines zoals ChatGPT, Perplexity en Google AI Overviews kunnen je alleen citeren als hun crawlers en live-fetch-bots je pagina's mogen ophalen. Eén verkeerde regel in je robots.txt maakt je onvindbaar in dat systeem. Een standaard aangevinkte "blokkeer AI-bots"-schakelaar bij je CDN doet hetzelfde, zonder foutmelding en zonder dat je het merkt. WAF-blokkades staan niet in robots.txt, dus testen we allebei: de instructie op papier en een echte fetch met een bot-user-agent.

We splitsen de bots ook op naar functie. Blokkeer je een zoek- of live-fetch-bot, dan ben je direct onzichtbaar. Een trainingsbot zoals GPTBot of CCBot blokkeren kan juist een legitieme keuze zijn. Bijna geen enkele gratis tool maakt dat onderscheid, terwijl het bepaalt of een rood stoplicht een probleem is of niet.

Begrippen in deze check

AI-bot (crawler)
Een programma van een AI-bedrijf dat je website bezoekt om content op te halen. Voorbeelden: GPTBot (OpenAI), ClaudeBot (Anthropic), PerplexityBot. Zonder toegang kan de engine je niet lezen en dus niet citeren.
robots.txt
Een tekstbestand op je site (op jouwdomein.nl/robots.txt) dat bots vertelt welke pagina's ze wel of niet mogen ophalen. Een verkeerde regel hier zet een bot buiten.
WAF (Web Application Firewall)
Een beveiligingslaag die verdacht of ongewenst verkeer al op serverniveau tegenhoudt, vaak via je CDN zoals Cloudflare. Een WAF kan AI-bots weigeren zelfs als je robots.txt ze toestaat, en dat is niet zichtbaar in robots.txt. Daarom doen we een aparte live-test.
CDN
Een netwerk dat je site sneller en veiliger serveert (bijvoorbeeld Cloudflare of Fastly). De WAF-instellingen zitten hier meestal in, inclusief de “blokkeer AI-bots”-schakelaar.
llms.txt
Een optioneel bestand met een korte samenvatting van je site, bedoeld voor AI-agents. Nog geen enkel groot AI-systeem gebruikt het aantoonbaar, dus het ontbreken is geen probleem.
Snippet
Het stukje tekst dat een zoek- of AI-systeem van je pagina laat zien. Met nosnippet of max-snippet:0 verbied je dat, en Google gebruikt dat signaal ook om je content uit AI-antwoorden te weren.

Veelgestelde vragen

Welke AI-bots moet ik toelaten?

De belangrijkste zijn de zoek- en live-fetch-bots: OAI-SearchBot en ChatGPT-User (ChatGPT), ClaudeBot en Claude-User (Claude), PerplexityBot (Perplexity), Googlebot (Google AI Overviews) en Bingbot (Copilot). Blokkeer je één daarvan, dan ben je in dat AI-systeem direct onvindbaar. Trainingsbots zoals GPTBot of CCBot blokkeren mag een bewuste keuze zijn. Dat maakt je niet onzichtbaar in de antwoorden.

Wat is het verschil tussen een robots.txt-blokkade en een WAF-blokkade?

robots.txt is een vrijwillige instructie die je zelf plaatst. Een WAF- of CDN-blokkade (bijvoorbeeld Cloudflares 'Block AI bots'-schakelaar) weigert bot-verkeer op serverniveau, vaak zonder dat de eigenaar het weet en niet zichtbaar in robots.txt. Daarom testen we allebei: we vergelijken een echte fetch met een browser-user-agent tegen één met een bot-user-agent.

Betekent een open robots.txt dat ik gevonden word?

Nee. Toegang is stap 1: de bot moet je site kúnnen bereiken. Of een AI-engine je vervolgens ook daadwerkelijk noemt in zijn antwoorden hangt af van je content, structured data en autoriteit. Dat testen we live in de volledige AI-zichtbaarheidsscan.

Gebouwd door Geoffrey Roof, AI Solutions Architect bij Artificial Studio, met een achtergrond in IT-infrastructuur en security.

Laatst bijgewerkt: 12 juli 2026. Bronnen: OpenAI bots, Anthropic, RFC 9309 (robots.txt).