Kies welke AI-crawlers je WordPress-site lezen
AI Crawler Control by Citlyze is een gratis WordPress-plugin. Hij leest de robots.txt die je site echt serveert, laat zien welke van de 40+ AI-crawlers erdoor mogen, en noemt de plugin, het thema of de instelling achter elke blokkade. Daarna kun je AI-trainingscrawlers buitensluiten terwijl ChatGPT-zoeken, Perplexity en andere AI-antwoorden je site nog steeds kunnen lezen en citeren.
Gratis op WordPress.org. Geen account nodig. Werkt met WordPress 6.4 en nieuwer.
Zie welke AI-crawlers erin komen
Leest de robots.txt die je site echt serveert en markeert 40+ AI-crawlers als toegestaan of geblokkeerd, gegroepeerd in AI-zoeken, AI-assistenten en AI-training.
Vind wat ze blokkeert
Noemt de plugin, het thema of de instelling achter elke blokkerende regel, en meldt een robots.txt-bestand dat WordPress overschrijft, de beheerde robots.txt van Cloudflare en hosts die crawlers weigeren voordat robots.txt wordt gelezen.
Blokkeer AI-training, blijf in AI-zoeken
Houd GPTBot, ClaudeBot en andere trainingscrawlers buiten terwijl OAI-SearchBot en PerplexityBot je kunnen blijven citeren. Bekijk de exacte regels voor je opslaat; zoekmachines worden nooit geblokkeerd.
Regels voor delen van je site
Houd AI-trainingscrawlers, of alle AI-crawlers, buiten /members/ of andere secties terwijl de rest van je site open blijft. Zoekmachines vallen er nooit onder.
AI-gereedheid in de editor
Beoordeelt elk bericht voor AI-antwoorden terwijl je schrijft, met dezelfde controles als de Chrome-extensie en de AEO-grader van Citlyze.
AI-suggesties, alleen als je erom vraagt
Met een AI-provider die in WordPress 7.0 of nieuwer is ingesteld, stelt de editor een vraag voor als tussenkop of een kort antwoord eronder. Er verandert niets tot je de suggestie invoegt.
Gratis, en niets gaat naar Citlyze
Geen account nodig. De controles draaien in je WordPress-beheer en lezen alleen je eigen site. AI-suggesties gaan naar je eigen AI-provider, en alleen als je klikt.
Blokkeer GPTBot en AI-trainingscrawlers, blijf in AI-zoeken
OpenAI, Anthropic en Perplexity gebruiken elk aparte crawlers voor aparte taken. GPTBot verzamelt trainingsdata, OAI-SearchBot bouwt de index die ChatGPT-zoeken citeert, en ChatGPT-User haalt een pagina op als iemand ernaar vraagt. GPTBot blokkeren houdt je content uit toekomstige modellen. OAI-SearchBot blokkeren haalt je uit de antwoorden van ChatGPT-zoeken, en dat is zelden de bedoeling. Besluit je training te blokkeren, dan laat de keuze die de plugin daarvoor heeft AI-zoeken ongemoeid.
Vind de plugin of instelling die AI-crawlers blokkeert
Een robots.txt in WordPress wordt ter plekke samengesteld: WordPress schrijft een paar regels, daarna voegen SEO-plugins, beveiligingsplugins en thema's hun eigen regels toe. De plugin voert elke bijdrage apart uit, zodat hij bij een geblokkeerde crawler kan zeggen welke plugin, welk thema of welke instelling de regel schreef. Hij meldt ook wat WordPress niet kan zien: een robots.txt-bestand op de server, de beheerde robots.txt van Cloudflare en hosts die AI-crawlers aan de rand van het netwerk blokkeren.
Installeren, controleren, kiezen
Installeer hem via WordPress.org
Zoek naar AI Crawler Control onder Plugins > Nieuwe plugin toevoegen, of gebruik de knop hierboven. Geen account en geen instellingen.
Open het Citlyze-menu
De controle start meteen, op de robots.txt die je bezoekers ontvangen, inclusief alles wat een cache of CDN onderweg verandert.
Kies je regels voor AI-crawlers
Kies een voorinstelling of selecteer crawlers één voor één, bekijk het voorbeeld en sla op. Ongedaan maken zet je vorige keuze terug.
Zoekmachines worden nooit geblokkeerd
Googlebot, Bingbot, Applebot en andere zoekmachinecrawlers staan in de lijst maar zijn niet te blokkeren vanuit de plugin, omdat je site dan uit de gewone zoekresultaten verdwijnt, niet alleen uit AI-antwoorden. Blokkeert een andere plugin er een, dan meldt de controle dat als eerste. Google-Extended wordt precies behandeld: het bepaalt Gemini-training en het onderbouwen van antwoorden in de Gemini-app en Vertex AI, niet Google Zoeken of AI Overviews.
Wat robots.txt je niet vertelt
Robots.txt zegt wat crawlers mogen lezen, niet wat ze echt lezen, en firewalls of de botbescherming van een CDN kunnen ze alsnog weigeren. Koppel de plugin aan Citlyze om te zien welke AI-crawlers echt langskomen, bevestigd aan de hand van waar elk verzoek vandaan komt, en welke AI-antwoorden je bezoekers sturen.
Bekijk AI-crawlertrackingGratis webtools voor hetzelfde werk
Controleert welke AI-crawlers je robots.txt toelaat of blokkeert, en wat elke blokkade kost.
Kies welke AI-crawlers je toestaat of blokkeert en download een kant-en-klare robots.txt.
Controleert een llms.txt regel voor regel aan de hand van de formaatspecificatie, via URL of door te plakken.
Leesbaar zijn is pas het begin
De plugin vertelt je of AI-crawlers je site kunnen lezen. Citlyze vertelt je of ChatGPT, Gemini, Perplexity en de AI-oppervlakken van Google je echt noemen en citeren, gemeten over herhaalde runs.
Ja. De AI-crawlercontrole en de regels voor AI-crawlers zijn gratis, zonder account en zonder gebruikslimiet. Je hebt alleen een Citlyze-account nodig om bezoeken van AI-crawlers en bezoeken vanuit AI-antwoorden bij te houden.
Raadt AI jou aan wanneer kopers vragen?
Volg hoe ChatGPT, Gemini, Perplexity, DeepSeek, ByteDance, Grok, Google AI Overview & AI Mode en Bing Copilot je merk noemen, citeren en rangschikken. Lees gevolgde antwoorden terug en zie de gaten die je kunt dichten.
Geen creditcard nodig
