Bekijk wat elke AI-crawler krijgt van je pagina's, en houd het zo
ai-readable is een opensourcetool voor de commandoregel en een GitHub Action. Eén commando toont het robots.txt-oordeel voor elke gedocumenteerde AI-crawler, hoeveel van de pagina bestaat voordat JavaScript draait, en negen leesbaarheidscontroles met een score op 100. In CI vergelijkt het elke pull request met een referentiemeting en faalt het wanneer een pagina achteruitgaat.
npx ai-readable example.com/pricing --renderrobots.txt-oordelen per crawler
Negentien gedocumenteerde AI-crawlers, gegroepeerd naar wat blokkeren je kost, met de exacte robots.txt-regel die elk oordeel bepaalde.
Initiële HTML versus gerenderd
Rendert de pagina zoals een browser dat doet en rapporteert hoeveel van de inhoud pas na JavaScript bestaat, kop voor kop.
Een vaste controle, geen eenmalige audit
Leg een referentiemeting vast voor je belangrijkste pagina's. Elke pull request wordt daarmee vergeleken en faalt bij een achteruitgang, met het bewijs in een opmerking.
Geen API-sleutel, niets wordt verzonden
Deterministische controles op de HTML en robots.txt die je server levert. De enige verzoeken zijn de pagina zelf, robots.txt en llms.txt.

Eén keer controleren, dan elke deploy bewaken
Voer het uit op een pagina
Het commando haalt de pagina, robots.txt en llms.txt op, scoort de negen controles en toont elke AI-crawler als toegestaan of geblokkeerd voor precies dat pad. Voeg de render-optie toe om te zien wat er pas na JavaScript verschijnt.
Los het op met je agent
De repository is ook een Agent Skill. Claude Code, Codex en Cursor voeren de controle uit, kiezen een recept voor je framework, voeren de kleinste aanpassing door en herhalen dat tot alles groen is.
Voeg de Action toe
Eén init-commando schrijft de configuratie en een workflow. Vanaf dan kleurt een pas geblokkeerde zoekbot, een noindex dat uit staging is gelekt of inhoud die achter JavaScript is verplaatst de pull request rood.
Waarom de initiële HTML telt
De meeste AI-ophaalcrawlers voeren geen JavaScript uit. Een prijspagina die volledig aan de clientzijde wordt gerenderd, is voor hen een titel en een lege container, en kan dus niet worden geciteerd, hoe goed die er in een browser ook uitziet. ai-readable vergelijkt de HTML die een crawler downloadt met de pagina nadat JavaScript heeft gedraaid en toont het verschil, inclusief de koppen die pas na het renderen verschijnen.
Een trainingsbot blokkeren is niet zoeken blokkeren
robots.txt-regels die zijn gekopieerd uit een snippet dat alle AI blokkeert, sluiten naast GPTBot vaak ook OAI-SearchBot en ChatGPT-User uit. De eerste twee voeden live antwoorden en het lezen van links; de derde voedt alleen modeltraining. De tabel per crawler scheidt de drie groepen en citeert de regel, zodat je je kunt afmelden voor training zonder uit de antwoorden te verdwijnen.
Regressies zijn het echte probleem
Een eenmalige audit vindt een fout één keer. Sites die met code-agents worden gebouwd en omgebouwd, krijgen elke week dezelfde fouten terug: een lay-outwijziging verplaatst de H1 naar een clientcomponent, een preview-instelling zet noindex in productie. De check vangt dat op in de pull request, vóór de deploy, en linkt naar het recept dat elk probleem oplost.
Wat het bewust niet doet
Het stuurt nooit verzoeken met een bot-user-agent, omdat CDN's echte crawlers herkennen aan hun IP-adres en een vervalst verzoek iets zegt over het CDN, niet over de crawler. Het vraagt ook nooit aan een AI-engine wat die van je merk vindt. Een groene controle betekent dat de engines de pagina kunnen lezen. Of ze je noemen en citeren, meet Citlyze in de loop van de tijd.
Leesbaar is de eerste stap. Aanbevolen is het doel.
ai-readable vertelt je of AI-engines een pagina kunnen lezen. Citlyze vertelt je of ze je noemen en citeren bij de vragen die je kopers stellen, gemeten in ChatGPT, Gemini, Perplexity en de AI-zoekfuncties van Google, met het aantal metingen achter elk percentage.
Ja, op dezelfde checklist: negen controles met dezelfde gewichten. Beide lezen tot 2 MB HTML per pagina, dus ook grote pagina's krijgen dezelfde score.
Nee. Het is MIT-gelicentieerd, draait op je machine of in je CI en doet geen AI-aanroepen. De enige netwerkverzoeken zijn de pagina, zijn robots.txt en zijn llms.txt. Renderen vereist Playwright, dat de GitHub Action voor je installeert.
Geef de preview-URL op als basis-URL en, voor beveiligde previews, het bypass-token als request-header vanuit een repository-secret. Eigen headers gaan alleen naar de origin waarop je de tool richt; een redirect naar een andere host laat ze vallen.
Next.js, Astro, single-page-app-exports uit op Vite gebaseerde builders zoals Lovable, v0 en Bolt, en robots.txt zelf. Elk recept koppelt een falende controle aan de kleinste wijziging waarmee die slaagt, met een snippet om te plakken.
Raadt AI jou aan als kopers ernaar vragen?
Volg hoe ChatGPT, Gemini, Perplexity, DeepSeek, Grok, Google AI Overview & AI Mode en Bing Copilot je merk noemen, citeren en rangschikken. Bekijk de gevolgde antwoorden en de gaten die je kunt dichten.
Geen creditcard nodig
