Kies welke AI-crawlers je WordPress-site lezen
AI Crawler Control by Citlyze is een gratis WordPress-plugin. Hij leest de robots.txt die je site echt levert, laat zien welke van de 40+ AI-crawlers erdoor mogen en noemt de plugin, het thema of de instelling achter elke blokkade. Daarna kun je AI-trainingscrawlers buitensluiten, terwijl ChatGPT-zoeken, Perplexity en andere AI-antwoorden je site nog steeds kunnen lezen en citeren.
Gratis op WordPress.org. Geen account nodig. Werkt met WordPress 6.4 en nieuwer.

Bekijk welke AI-crawlers binnenkomen
Leest de robots.txt die je site echt levert en markeert 40+ AI-crawlers als toegestaan of geblokkeerd, gegroepeerd in AI-zoeken, AI-assistenten en AI-training.
Vind wat ze blokkeert
Noemt de plugin, het thema of de instelling achter elke blokkerende regel, en meldt een robots.txt-bestand dat WordPress overschrijft, de beheerde robots.txt van Cloudflare en hosts die crawlers weigeren voordat robots.txt wordt gelezen.
Blokkeer AI-training, blijf in AI-zoeken
Houd GPTBot, ClaudeBot en andere trainingscrawlers buiten terwijl OAI-SearchBot en PerplexityBot je kunnen blijven citeren. Bekijk de exacte regels voor je opslaat; zoekmachines worden nooit geblokkeerd.
Regels voor delen van je site
Houd AI-trainingscrawlers, of alle AI-crawlers, buiten /members/ of andere secties terwijl de rest van je site open blijft. Zoekmachines vallen er nooit onder.
AI-gereedheid in de editor
Beoordeelt elk bericht voor AI-antwoorden terwijl je schrijft, met dezelfde controles als de Chrome-extensie en de AEO-grader van Citlyze.
AI-suggesties, alleen als je erom vraagt
Met een AI-provider die in WordPress 7.0 of nieuwer is ingesteld, stelt de editor een vraag voor als tussenkop of een kort antwoord eronder. Er verandert niets tot je de suggestie invoegt.
Alerts als crawlers worden geblokkeerd
Controleert je robots.txt elke dag en waarschuwt je in het WordPress-beheer en in Sitediagnose als iets AI-zoeken of zoekmachines begint te blokkeren. E-mailmeldingen zijn optioneel.
llms.txt, eerlijk aangepakt
Controleert de llms.txt die je site levert, of zet er zelf een eenvoudige neer als die er nog niet is, en zegt eerlijk dat geen grote AI-zoekmachine documenteert dat hij het bestand leest.
Gratis, en niets gaat naar Citlyze
Geen account nodig. De controles draaien in je WordPress-beheer en lezen alleen je eigen site. AI-suggesties gaan naar je eigen AI-provider, en alleen als je klikt.

Blokkeer GPTBot en AI-trainingscrawlers, blijf in AI-zoeken
OpenAI, Anthropic en Perplexity gebruiken elk aparte crawlers voor aparte taken. GPTBot verzamelt trainingsdata, OAI-SearchBot bouwt de index die ChatGPT-zoeken citeert, en ChatGPT-User haalt een pagina op als iemand ernaar vraagt. GPTBot blokkeren houdt je content uit toekomstige modellen. OAI-SearchBot blokkeren haalt je uit de antwoorden van ChatGPT-zoeken, en dat is zelden de bedoeling. Besluit je training te blokkeren, dan laat de optie voor alleen training in de plugin AI-zoeken ongemoeid.


Vind de plugin of instelling die AI-crawlers blokkeert
Een robots.txt in WordPress wordt ter plekke samengesteld: WordPress schrijft een paar regels, daarna voegen SEO-plugins, beveiligingsplugins en thema's hun eigen regels toe. De plugin voert elke bijdrage apart uit, zodat hij bij een geblokkeerde crawler kan zeggen welke plugin, welk thema of welke instelling de regel schreef. Hij meldt ook wat WordPress niet kan zien: een robots.txt-bestand op de server, de beheerde robots.txt van Cloudflare en hosts die AI-crawlers aan de rand van het netwerk blokkeren.
Installeren, controleren, kiezen
Installeer hem via WordPress.org
Zoek naar AI Crawler Control onder Plugins > Nieuwe plugin toevoegen, of gebruik de knop hierboven. Geen account en geen instellingen.
Open het Citlyze-menu
De controle start meteen, op de robots.txt die je bezoekers ontvangen, inclusief alles wat een cache of CDN onderweg verandert.
Kies je regels voor AI-crawlers
Kies een voorinstelling of selecteer crawlers één voor één, bekijk het voorbeeld en sla op. Ongedaan maken zet je vorige keuze terug.
Zoekmachines worden nooit geblokkeerd
Googlebot, Bingbot, Applebot en andere zoekmachinecrawlers staan in de lijst maar zijn niet te blokkeren vanuit de plugin, omdat je site dan uit de gewone zoekresultaten verdwijnt, niet alleen uit AI-antwoorden. Blokkeert een andere plugin er een, dan meldt de controle dat als eerste. Google-Extended wordt precies behandeld: het bepaalt Gemini-training en het onderbouwen van antwoorden in de Gemini-app en Vertex AI, niet Google Zoeken of AI Overviews.
Wat robots.txt je niet vertelt
Robots.txt zegt wat crawlers mogen lezen, niet wat ze echt lezen, en firewalls of de botbescherming van een CDN kunnen ze alsnog weigeren. Koppel de plugin aan Citlyze om te zien welke AI-crawlers echt langskomen, bevestigd aan de hand van waar elk verzoek vandaan komt, en welke AI-antwoorden je bezoekers sturen.
Bekijk AI-crawlertrackingGratis webtools voor hetzelfde werk
Controleert welke AI-crawlers je robots.txt toelaat of blokkeert, en wat elke blokkade kost.
Kies welke AI-crawlers je toestaat of blokkeert en download een kant-en-klare robots.txt.
Controleert een llms.txt regel voor regel aan de hand van de formaatspecificatie, via URL of door te plakken.
Leesbaar zijn is pas het begin
De plugin vertelt je of AI-crawlers je site kunnen lezen. Citlyze vertelt je of ChatGPT, Gemini, Perplexity en de AI-zoekfuncties van Google je echt noemen en citeren, gemeten over herhaalde metingen.
Ja. De AI-crawlercontrole en de regels voor AI-crawlers zijn gratis, zonder account en zonder gebruikslimiet. Je hebt alleen een Citlyze-account nodig om bezoeken van AI-crawlers en bezoeken vanuit AI-antwoorden bij te houden.
Alleen als je regels kiest en opslaat. Hij voegt een gemarkeerd blok toe aan het einde van de robots.txt die WordPress levert, na alles wat andere plugins schrijven, en Ongedaan maken zet je vorige keuze terug. Staat er een robots.txt-bestand op je server, dan kan WordPress het niet veranderen; de plugin toont dan de regels om erin te kopiëren.
Ja. Hun robots.txt-regels blijven zoals ze zijn, de regels van de plugin komen erna, en de controle noemt ze als ze een crawler blokkeren.
Nee. De gratis tools doen geen verzoeken aan Citlyze of iemand anders en lezen alleen je eigen site. Er worden alleen gegevens verstuurd als je een Citlyze-account koppelt voor tracking.
Installeer de plugin, open Citlyze > AI crawler access, kies ‘Block AI training, stay in AI search’, controleer het voorbeeld en sla op. De plugin voegt een Disallow-regel voor GPTBot en de andere trainingscrawlers toe aan je robots.txt en laat OAI-SearchBot en ChatGPT-User met rust, zodat ChatGPT-zoeken je pagina's nog kan lezen.
Nee. De plugin blokkeert nooit Googlebot, Bingbot of andere crawlers van zoekmachines. Google-Extended blokkeren heeft alleen invloed op de training en grounding van Gemini, niet op Google Zoeken, AI Overviews of AI Mode.
Hij controleert meer dan 40 bekende crawlers. Je kunt elke AI-crawler blokkeren, waaronder GPTBot, ClaudeBot, CCBot, Bytespider, Google-Extended, Applebot-Extended, Meta-ExternalAgent, PerplexityBot en OAI-SearchBot, met een voorinstelling of een voor een. Robots.txt is een verzoek: nette crawlers houden zich eraan, en een crawler die het negeert moet je bij je firewall of CDN tegenhouden.
Raadt AI jou aan als kopers ernaar vragen?
Volg hoe ChatGPT, Gemini, Perplexity, DeepSeek, Grok, Google AI Overview & AI Mode en Bing Copilot je merk noemen, citeren en rangschikken. Bekijk de gevolgde antwoorden en de gaten die je kunt dichten.
Geen creditcard nodig
