Outil SEO, IA et GEO gratuitTesteur robots.txt pour les IA
Saisissez l'adresse de votre site : le testeur lit son fichier robots.txt et indique, IA par IA, quels robots peuvent lire vos pages. D'abord ceux qui permettent d'être cité dans les réponses, puis ceux qui servent à l'entraînement. Vous voyez en un coup d'œil si ChatGPT, Claude, Perplexity ou Google peuvent vous citer.
Comment utiliser le testeur
- Saisissez l'adresse de votre site ; ajoutez une page précise si vous voulez la tester.
- Lisez la synthèse : une ligne par IA dit si elle peut vous citer.
- Ouvrez le détail pour voir la règle appliquée à chaque robot, et corrigez avec le générateur de robots.txt si besoin.
Comment lire le résultat
Les robots de recherche comptent le plus : s'ils sont bloqués, l'IA ne peut pas reprendre vos pages dans ses réponses. Les robots d'entraînement relèvent de votre choix. Les robots à la demande lisent une page quand un utilisateur le demande ; certains ignorent le robots.txt, et le testeur le signale.
Les robots testés
Les robots publiés par OpenAI, Anthropic, Perplexity, Google, Mistral AI, Apple et Common Crawl, plus Bingbot, le robot de Bing. La liste suit leurs documentations officielles ; elle est mise à jour quand un éditeur ajoute ou renomme un robot.
Pour aller plus loin
Le testeur lit votre fichier robots.txt. Vérifiez aussi les réglages de votre pare-feu, de votre hébergeur ou de Cloudflare, qui s'appliquent en dehors de ce fichier. Pour une consigne noindex, utilisez l'analyse SEO On-Page. Et pour savoir si les IA vous citent déjà, lancez l'audit SEO IA gratuit.
Questions fréquentes : test du robots.txt, SEO, IA et GEO
Comment tester son fichier robots.txt ?
Pour les robots des IA, ce testeur répond robot par robot. Pour Google, la Search Console propose aussi un rapport robots.txt, dans ses paramètres, qui montre la version lue par Google et ses erreurs.
Comment savoir si ChatGPT peut lire mon site ?
Vérifiez que votre robots.txt autorise OAI-SearchBot, puis qu'aucun pare-feu ne le bloque. Dans vos statistiques, des visites portant la mention « utm_source=chatgpt.com » montrent que ChatGPT recommande déjà certaines de vos pages.
Mon robots.txt autorise tout : pourquoi l'IA ne me cite-t-elle pas ?
Pouvoir lire une page ne suffit pas. L'IA cite les pages qui répondent clairement aux questions et les entreprises dont d'autres sites parlent. L'audit SEO IA gratuit montre qui elle cite à votre place, et pourquoi.
Que faire si un robot est bloqué ?
Créez un nouveau fichier avec le générateur de robots.txt, puis mettez-le en ligne selon votre plateforme. Testez-le à nouveau ensuite.
Le test suit-il les règles de Google ?
Oui. Le testeur applique la norme du robots.txt comme Google la lit : la règle la plus précise l'emporte et, à précision égale, l'autorisation passe avant l'interdiction.
