Comment savoir si je bloque les crawlers IA ?

Vérifiez dans votre robots.txt les règles Disallow sous les user-agents IA comme GPTBot, ClaudeBot, PerplexityBot ou Google-Extended. Cet outil lit votre robots.txt et vous indique, crawler par crawler, s'il est autorisé ou bloqué.

Dois-je autoriser les crawlers IA ?

Si vous voulez que les moteurs de réponse IA comme ChatGPT, Claude, Perplexity et les AI Overviews de Google décrivent et citent votre marque, ils doivent pouvoir lire votre site. Bloquer leurs crawlers vous rend invisible dans les réponses IA.

Vérification des crawlers IA : qui est réellement autorisé ?

Si votre robots.txt bloque les crawlers IA, les moteurs de réponse ne peuvent ni vous lire ni vous citer - point final. Saisissez votre site pour voir, crawler par crawler, si GPTBot, ClaudeBot, PerplexityBot et les autres sont autorisés.

Sans inscription
Lit uniquement /robots.txt
Rien n'est stocké

Pourquoi c'est important

Les moteurs de réponse IA se forgent leur vision de votre marque en explorant votre site. Beaucoup de sites ont copié d'anciennes règles robots.txt - ou collé un extrait « block all bots » - qui excluent discrètement les crawlers IA. Résultat : vous devenez invisible dans ChatGPT, Claude, Perplexity et les IA Overviews de Google, sans jamais le voir.

Autoriser les crawlers est nécessaire mais pas suffisant. Une fois qu'ils peuvent vous lire, évaluez votre préparation IA globale - et pour voir ce que les moteurs disent réellement, lancez un audit gratuit.