OpenAI · Exploration pour un moteur
OAI-SearchBot
Ce qu’il fait
OAI-SearchBot est le robot d’OpenAI qui fait apparaître les sites dans les fonctions de recherche de ChatGPT. Il se règle dans robots.txt : un site qui le refuse n’est plus montré dans les réponses de recherche, écrit OpenAI, mais peut encore y figurer comme simple lien de navigation.
- Jeton
robots.txt OAI-SearchBot- Obéit à
robots.txt - Oui, d’après son éditeur
- Signature
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbot- Le reconnaître
- OpenAI publie les plages d’adresses IP de ce robot : openai.com/searchbot.json. La signature s’imite : c’est l’adresse IP de la requête qu’on croise avec ce fichier.
- Pour le refuser
User-agent: OAI-SearchBot Disallow: /
Ce qu’il fait, et pour quel produit
OpenAI le dit sans détour : ce robot est fait pour la recherche. Il sert à faire remonter des sites dans les résultats des fonctions de recherche de ChatGPT. L’entraînement des modèles est décrit comme le rôle de GPTBot, réglé à part ; l’éditeur ajoute que, si un site autorise les deux, une seule exploration peut servir aux deux usages.
Ce que le refuser change, et ne change pas
La phrase d’OpenAI tient en deux temps : les sites qui s’excluent d’OAI-SearchBot ne sont pas montrés dans les réponses de recherche de ChatGPT, mais peuvent encore apparaître comme liens de navigation. Refuser ce robot, c’est donc sortir des réponses de recherche, pas forcément de tout affichage. La page n’explique pas ce qu’elle entend par lien de navigation.
Ce refus ne règle ni l’entraînement, ni les pages qu’un utilisateur fait ouvrir par ChatGPT-User : OpenAI précise que ce dernier ne détermine pas la présence dans la recherche, et renvoie à OAI-SearchBot pour s’en exclure. Pour les résultats de recherche, un changement de robots.txt met environ vingt-quatre heures à être pris en compte.
Le lire dans les journaux
Pour paraître dans les résultats, OpenAI recommande deux choses : autoriser le robot dans robots.txt, et laisser passer les requêtes venues de ses plages d’adresses publiées. La seconde vise le pare-feu, qui peut rejeter ce que le fichier autorise.
La signature ressemble à celle d’un Chrome sur macOS, suivie de OAI-SearchBot/1.4 ; le numéro de version peut changer. Pour les requêtes sur robots.txt, OpenAI indique pouvoir y insérer un marqueur robots.txt. On attend des 200 sur les pages qui comptent ; des 403 en série désignent un blocage en amont. Sa présence dans les journaux dit qu’une page peut être montrée, pas qu’elle est citée.
Le sujet, traité en entier
Sources
- OpenAI — Overview of OpenAI Crawlers Documentation officielle, lue dans un navigateur le 20 novembre 2026. Rôle d’OAI-SearchBot, effet d’une exclusion (réponses de recherche, liens de navigation), délai d’environ 24 heures, recommandation sur robots.txt et les plages d’adresses, exemple de signature (OAI-SearchBot/1.4) et variante avec marqueur robots.txt.
Page revue le