Démarrez un essai gratuit de 14 jours, sans carte bancaire

Quels robots d'IA peuvent vraiment lire votre site ?

Saisissez une URL : nous lisons votre robots.txt comme les robots le font, puis rendons le verdict pour 44 robots d'IA documentés : autorisé ou bloqué, la règle exacte qui a tranché, et ce que le blocage de chaque catégorie vous coûte. Sans compte, rien n'est conservé.

comment ça marche

Une URL en entrée, un verdict par robot en sortie

01

Saisissez l'URL d'une page

Nous résolvons d'abord les redirections, pour que la vérification porte sur l'origine qui sert réellement votre site, puis récupérons son robots.txt une seule fois.

02

Nous évaluons chaque robot d'IA documenté

Les jetons robots de chaque crawler sont confrontés à vos règles selon la sémantique RFC 9309 : la correspondance la plus longue l'emporte, jokers compris. La règle gagnante s'affiche à côté de chaque verdict.

03

Lisez le résultat par catégorie

Les robots d'indexation de recherche et de récupération pour assistants déterminent si les réponses d'IA peuvent vous voir et vous citer ; les robots d'entraînement n'affectent que l'entraînement futur des modèles. L'outil garde les deux décisions séparées.

Ce qu'un blocage robots.txt fait, et ne fait pas

robots.txt est le contrat documenté entre votre site et les robots respectueux des règles. Bloquer un robot de récupération retire vos pages des réponses que ce moteur construit ; bloquer un robot d'entraînement ne fait que retirer votre contenu de l'entraînement futur des modèles. Le fichier ne peut pas arrêter un acteur malveillant, et il n'en a pas besoin : les robots qui comptent pour la visibilité IA publient tous leurs jetons et respectent les règles.

Pourquoi nous ne sondons pas votre site avec des user-agents de bots

Envoyer des requêtes qui se font passer pour GPTBot testerait la façon dont votre site traite un faux GPTBot, ce qui est autre chose : les CDN vérifient les vrais robots par leurs plages d'IP publiées, pas par la chaîne user-agent. Une sonde usurpée produirait des réponses sûres d'elles et fausses. Lire le robots.txt rend compte du contrat que vous publiez réellement.

Le blocage que personne ne se rappelle avoir écrit

La cause la plus fréquente d'une visibilité IA nulle n'est pas la qualité du contenu. C'est une règle anti-bots générale ajoutée il y a des années au niveau du CDN ou dans le robots.txt, souvent pendant une alerte au scraping, qui attrape encore aujourd'hui chaque nouveau robot d'IA. Si cet outil montre des robots de récupération bloqués et que vous ne vous rappelez pas l'avoir décidé, vous venez de trouver votre correction la plus rentable.

Les blocages CDN et pare-feu n'apparaîtront pas ici

Cet outil lit le robots.txt, la couche que vous publiez. Certains sites bloquent aussi les bots au niveau du CDN ou du pare-feu, ce qui est invisible de l'extérieur et peut contredire un robots.txt permissif. Si votre robots.txt autorise un robot et que son opérateur ne parvient toujours pas à vous atteindre, vérifiez ensuite les réglages de gestion des bots de votre CDN.

la question suivante

L'accès est l'étape zéro. La visibilité est la mesure.

Ce vérificateur vous dit si les robots d'IA peuvent lire votre site. Citlyze vous dit ce que les moteurs d'IA disent réellement de votre marque une fois qu'ils l'ont fait : mentions, citations et part de voix face aux concurrents, suivies à intervalle régulier.

FAQ

L'accès des robots, expliqué

Envie d'une démo de Citlyze ? Réserver une démo

GPTBot collecte du contenu pour l'entraînement des modèles ; OAI-SearchBot indexe pour les réponses de recherche de ChatGPT, et un user-agent distinct récupère en direct les pages qu'un utilisateur demande. Bloquer le bot d'entraînement laisse votre visibilité de recherche intacte ; bloquer les agents de recherche et de récupération vous retire des réponses de ChatGPT. La même distinction existe chez les autres fournisseurs, c'est pourquoi cet outil groupe les verdicts par catégorie.

L'IA vous recommande-t-elle quand les acheteurs demandent ?

Suivez comment ChatGPT, Gemini, Perplexity, DeepSeek, ByteDance et Grok mentionnent, citent et classent votre marque. Consultez les réponses suivies et les écarts à combler.

Sans carte bancaire