Glossaire SEO, IA et GEO
OAI-SearchBot en bref : le robot de recherche de ChatGPT
OAI-SearchBot est le robot d'OpenAI qui explore le web pour trouver les pages que ChatGPT affiche et cite quand il cherche en ligne. S'il est bloqué dans le fichier robots.txt, vos pages ne sont plus reprises dans ses réponses : au mieux, un simple lien.
Le guide des robots des IA et du robots.txt détaille les robots de chaque IA. Selon OpenAI, un changement du robots.txt met environ 24 heures à être pris en compte. OAI-SearchBot ne sert pas à l'entraînement : c'est le rôle de GPTBot.
Et pour votre entreprise ?
Ouvrez votresite.fr/robots.txt : aucune ligne ne doit interdire OAI-SearchBot. Vérifiez aussi les réglages de votre hébergeur ou de votre pare-feu, qui bloquent parfois les robots des IA d'un clic. Un « Disallow: / » oublié après la création du site bloque aussi OAI-SearchBot. Enfin, laissez passer Bingbot : OpenAI indique que ChatGPT s'appuie aussi sur des moteurs de recherche tiers.
Sources
OpenAI, « Overview of OpenAI Crawlers »
