# Worden AI-agents op je site geblokkeerd? > Voer je domein in en deze gratis controle vertelt of ChatGPT, Claude, Perplexity, Google en Bing je site kunnen bereiken. Voor 14 AI- en zoekbots leest hij robots.txt, vraagt hij je homepage per bot op en herkent hij Cloudflare-challenges, firewall-403’s en noindex-tags. Je krijgt één oordeel, Open, Gedeeltelijk geblokkeerd of Geblokkeerd, plus de oplossing, in minder dan 30 seconden en zonder account. Bron: https://citetune.com/nl/tools/ai-bot-toegang-controleren ## Zo lees je een resultaat Het oordeel bovenaan komt alleen van de zoekkant: zoekcrawlers zoals Googlebot, Bingbot en OAI-SearchBot, en AI-agents zoals ChatGPT-User die een pagina ophalen wanneer iemand een assistent over jou bevraagt. Bereiken ze allemaal je homepage, dan is de site Open. Worden sommige geweigerd, dan is ze Gedeeltelijk geblokkeerd; komt er geen enkele door, dan Geblokkeerd. Elke rij heeft twee antwoorden. De kolom robots.txt zegt of het bestand het token van de bot toestaat op je homepage en welke regel overeenkwam. De kolom Livetest zegt wat onze servers ontvingen met de gepubliceerde user-agent van die bot: een 200 betekent dat de pagina is geleverd, terwijl een 403, een 429 of een challengepagina betekent dat iets tussen de bot en je pagina’s hem weigert. Een geleverde pagina die noindex zegt, telt voor zoeken als geblokkeerd. ## Trainingscrawlers zijn jouw keuze GPTBot, ClaudeBot, Google-Extended, Applebot-Extended, CCBot en Meta-ExternalAgent verzamelen content voor modeltraining. Ze staan in een aparte tabel en verlagen het oordeel nooit: ze blokkeren is een legitieme keuze, en OpenAI, Anthropic, Google en Apple documenteren elk aparte bots voor zoeken. De controle toont wat is geblokkeerd en laat de beslissing aan jou. ## De standaard van Cloudflare die AI-agents blokkeert Sinds 15 september 2026 blokkeren de standaardinstellingen van Cloudflare voor nieuwe domeinen Training- en Agent-bots op pagina’s die advertenties tonen, terwijl Search-crawlers zijn toegestaan. Een webshop op Cloudflare kan ChatGPT-User of Perplexity-User weigeren zonder dat iemand dat koos. Worden op een Cloudflare-site alleen agent- en trainingsbots geweigerd, dan noemt de controle dat patroon en geeft hij de stappen in het dashboard om het te wijzigen onder Security, Settings, Configure AI bot policies. Hij herkent ook het beheerde robots.txt-blok van Cloudflare, dat alleen trainingscrawlers verbiedt, en onderscheidt het van een blokkade die ook zoekcrawlers raakt, zoals Bot Fight Mode of een aangepaste firewallregel. ## Wat de controle je niet kan vertellen De verzoeken komen van onze servers, niet uit de echte IP-bereiken van de bots. Een firewall die bots verifieert op IP-adres of reverse DNS, kan ons verzoek als nabootser behandelen, dus een blokkade hier toont een regel die overeenkomt met de user-agent, niet het bewijs dat de echte crawler is geblokkeerd. OpenAI, Anthropic en Perplexity publiceren hun IP-bereiken; controleer de logs van je firewall op verzoeken uit die bereiken om zeker te zijn. De test vraagt alleen je homepage op, één keer per bot, twee tegelijk, vanaf één plek en op één moment. Hij leest je logs niet en zegt niet of een bot ooit langs is geweest. ## Welke bots worden getest Veertien tokens: GPTBot, OAI-SearchBot, ChatGPT-User, ClaudeBot, Claude-User, Claude-SearchBot, PerplexityBot, Perplexity-User, Google-Extended, Googlebot, Bingbot, CCBot, Applebot-Extended en Meta-ExternalAgent. Google-Extended en Applebot-Extended zijn robots.txt-besturingstokens zonder eigen crawler, dus voor die twee geldt alleen de robots.txt-controle. ## Veelgestelde vragen ### Is Cloudflare begonnen met het blokkeren van AI-bots op mijn site? Mogelijk. Sinds 15 september 2026 blokkeren de standaardinstellingen van Cloudflare voor nieuwe domeinen Training- en Agent-bots op pagina’s die advertenties tonen, terwijl Search-crawlers zijn toegestaan. Agent-bots zoals ChatGPT-User halen een pagina op wanneer iemand een AI-assistent ernaar vraagt. De controle markeert dit patroon en noemt de oplossing: zet in het dashboard onder Security, Settings, Configure AI bot policies, Agent op toestaan. ### Is GPTBot de bot die bepaalt of ChatGPT mijn site toont? Nee. OpenAI documenteert GPTBot als de crawler voor content die zijn modellen mag trainen, en OAI-SearchBot als de crawler die sites toont in de zoekfuncties van ChatGPT. Sites die zich voor OAI-SearchBot hebben afgemeld, worden niet getoond in de zoekantwoorden van ChatGPT. De twee worden apart gestuurd in robots.txt, dus controleer ze allebei. ### Moet ik GPTBot en ClaudeBot blokkeren? Dat is een zakelijke beslissing. Beide zijn gedocumenteerd als trainingscrawlers; ze blokkeren houdt je content buiten modeltraining. Geen van de aanbieders koppelt ze aan zijn zoekresultaten, die OAI-SearchBot en Claude-SearchBot gebruiken. Daarom telt de controle een trainingsblokkade nooit mee in je oordeel. Wil je in AI-zoekantwoorden verschijnen, laat de zoek- en agentbots dan toegestaan. ### Waarom zegt de controle dat een bot in robots.txt is toegestaan maar toch is geblokkeerd? robots.txt is een verzoek aan crawlers, geen poort. Je CDN, webapplicatiefirewall of host kan nog steeds een 403, een 429 of een challengepagina teruggeven aan de user-agent van een bot. In dat geval is het oordeel een firewallblokkade, geen robots.txt-blokkade, en zit de oplossing in de instellingen van je CDN of firewall. ### Haalt het blokkeren van Google-Extended mij uit de AI-overzichten van Google? Google zegt dat Google-Extended geen invloed heeft op opname in Google Zoeken en geen rankingsignaal is. De gids over de AI-functies zegt dat een pagina als ondersteunende link in AI-overzichten en de AI-modus kan verschijnen wanneer ze is geïndexeerd en met een snippet getoond kan worden, zonder aanvullende technische vereisten.