Anthropic · Récupération à la demande
Claude-User
Ce qu’il fait
Claude-User est l’agent avec lequel Claude accède à un site quand un utilisateur lui pose une question. Anthropic le présente comme un robot que le site peut désactiver dans robots.txt : Claude ne récupère alors plus ses contenus en réponse à une demande, ce qui peut réduire sa visibilité.
- Jeton
robots.txt Claude-User- Obéit à
robots.txt - Oui, d’après son éditeur
- Le reconnaître
- Anthropic publie une liste d’adresses IP : claude.com/crawling/bots.json. Une requête dont l’adresse source y figure vient d’Anthropic, écrit l’éditeur. La liste est commune à ses robots : elle ne dit pas lequel.
- Pour le refuser
User-agent: Claude-User Disallow: /
Ce qu’il fait, et pour quel produit
Anthropic écrit que, lorsqu’une personne interroge Claude, l’assistant peut accéder à des sites avec l’agent Claude-User. Ce n’est ni la collecte pour l’entraînement, confiée à ClaudeBot, ni l’indexation pour la recherche, confiée à Claude-SearchBot : la requête part parce que quelqu’un a demandé quelque chose.
Ce que le refuser change, et ne change pas
Anthropic ne traite pas cet agent comme OpenAI traite ChatGPT-User ou Perplexity Perplexity-User. Sa page pose que ses robots respectent robots.txt, et présente Claude-User comme le moyen, pour un site, de contrôler l’accès par ces requêtes d’utilisateurs. La conséquence est écrite : le désactiver empêche le système de récupérer les contenus du site en réponse à une demande, ce qui « peut réduire » sa visibilité dans les recherches menées pour un utilisateur.
Ce refus ne règle ni l’entraînement ni l’indexation de recherche, qui ont chacun leur jeton. Il ne couvre pas non plus les navigateurs qu’Anthropic héberge pour que Claude accomplisse une tâche au nom d’un utilisateur : un autre article du centre d’aide les décrit, avec un jeton Claude-Agent ajouté à la signature du navigateur et des adresses publiées à part. Anthropic y précise que ces préférences sont indépendantes de celles de ses robots.
Le lire dans les journaux
La page ne donne pas de chaîne user-agent complète : on cherche le jeton Claude-User, et l’on croise l’adresse IP avec la liste publiée. Un passage signale qu’une page a été demandée pour répondre à quelqu’un ; ce n’est ni une visite, ni la preuve d’une citation.
Le sujet, traité en entier
Sources
- Anthropic — Does Anthropic crawl data from the web, and how can site owners block the crawler? Centre d’aide de Claude, page lue dans un navigateur le 20 novembre 2026. Rôle de Claude-User et effet de sa désactivation, respect de robots.txt par les robots de l’éditeur, lien vers la liste d’adresses. La page ne donne aucune chaîne user-agent.
- Anthropic — How do Anthropic-hosted browsers identify themselves when they browse the web on a user’s behalf? Centre d’aide de Claude, page ouverte le 20 novembre 2026. Jeton Claude-Agent, adresses publiées séparément, préférences indépendantes de celles des robots.
Page revue le