Faux
« Bloquer GPTBot fait disparaître un site des réponses de ChatGPT »
Verdict : faux
Faux. OpenAI écrit que GPTBot collecte des contenus pouvant servir à entraîner ses modèles, et que la présence dans les réponses de recherche de ChatGPT dépend d’un autre robot, OAI-SearchBot. Chaque réglage est indépendant de l’autre : on peut interdire le premier et laisser passer le second. C’est bloquer OAI-SearchBot qui fait sortir des réponses de recherche.
D’où vient l’idée
D’un raccourci. Le nom du robot contient celui du produit : on en a fait « le robot de ChatGPT ». Et beaucoup de fichiers robots.txt ou de règles de pare-feu ont été écrits contre « les robots d’IA » en bloc, sans distinguer les usages ; quand tout est bloqué d’un coup, le site sort bien des réponses, et l’on attribue l’effet au nom le plus connu.
L’idée a aussi un fond de vrai. Un modèle répond en partie de mémoire, à partir de ce sur quoi il a été entraîné : refuser l’entraînement, c’est renoncer à nourrir cette mémoire pour les modèles à venir. OpenAI ne décrit pas cet effet ; c’est notre lecture, et elle ne concerne pas les réponses appuyées sur une recherche.
Ce qu’OpenAI écrit
La page « Overview of OpenAI Crawlers » sépare les rôles.
GPTBotexplore des contenus qui peuvent servir à entraîner les modèles de fondation d’OpenAI. L’interdire indique que le contenu du site ne doit pas servir à cet entraînement.OAI-SearchBotsert à faire apparaître les sites dans les fonctions de recherche de ChatGPT. Un site qui l’exclut n’est pas montré dans les réponses de recherche, même s’il peut encore apparaître comme lien de navigation.ChatGPT-Usercorrespond aux pages ouvertes à la demande d’un utilisateur. Il ne sert pas à déterminer si un contenu peut apparaître dans la recherche.
Et la phrase qui tranche : chaque réglage est indépendant des autres — un site peut autoriser OAI-SearchBot pour figurer dans les résultats de recherche tout en interdisant GPTBot. Pour la recherche, un changement de robots.txt met environ vingt-quatre heures à être pris en compte.
Ce qu’on en fait
Décider par usage, pas par éditeur. Qui refuse l’entraînement sans renoncer aux citations écrit deux lignes, User-agent: GPTBot puis Disallow: /, et laisse OAI-SearchBot libre. Attention à la syntaxe : un groupe nommé remplace le groupe User-agent: *, il ne s’y ajoute pas.
Puis vérifier ce qui est réellement servi : lire le robots.txt en ligne, et chercher OAI-SearchBot dans les journaux du serveur ou du CDN, avec son code de réponse. Des 403 trahissent une règle de pare-feu qui bloque ce que robots.txt autorise. Anthropic documente un partage comparable entre ClaudeBot et Claude-SearchBot. Dans tous les cas, robots.txt reste une demande que l’éditeur s’engage à suivre, pas un verrou.
Le sujet, traité en entier
Sources
- OpenAI — Overview of OpenAI Crawlers Rôles de GPTBot, OAI-SearchBot et ChatGPT-User ; indépendance des réglages ; délai d’environ 24 heures pour la recherche. Ne dit rien de l’effet d’un refus d’entraînement sur les réponses données sans recherche. Ouverte le 20 novembre 2026.
- Anthropic — Does Anthropic crawl data from the web, and how can site owners block the crawler? Robots distincts pour l’entraînement (ClaudeBot) et pour la recherche (Claude-SearchBot). Ouverte le 20 novembre 2026.
- RFC 9309 — Robots Exclusion Protocol IETF, septembre 2022. Les règles ne sont pas une forme d’autorisation d’accès. Ouverte le 20 novembre 2026.
Page revue le