Demander un devis Devis

Meta · Collecte pour l’entraînement

Meta-ExternalAgent

Ce qu’il fait

Robot de Meta qui explore le web pour des usages tels que l’entraînement de modèles d’IA de fondation ou l’amélioration de produits par l’indexation directe de contenus. Il se refuse dans robots.txt. C’est le seul des cinq robots documentés par Meta dont la finalité déclarée couvre l’entraînement.

Jeton robots.txt
meta-externalagent
Obéit à robots.txt
Oui, d’après son éditeur
Signature
meta-externalagent/1.1
Le reconnaître
Meta ne documente aucun moyen de le vérifier : sa page ne publie ni plages d’adresses ni méthode par DNS inverse pour ce robot.
Pour le refuser
User-agent: meta-externalagent
Disallow: /

Deux finalités dans une même phrase

Meta écrit que ce robot explore le web « pour des usages tels que » l’entraînement de modèles d’IA de fondation ou l’amélioration de produits par l’indexation directe de contenus. La formule est ouverte, et la page ne dit ni quels produits sont visés ni comment séparer les deux finalités : un seul jeton les couvre. Parmi les cinq robots que Meta documente, c’est le seul dont la description mentionne l’entraînement.

Ce que le refuser change, et ce qu’il laisse en place

Meta renvoie à robots.txt : pour bloquer un de ses robots, on ajoute une règle Disallow au groupe qui le nomme. La page dit préférer cette pratique aux formats non standard, comme les balises NoAI. Les robots pouvant garder le fichier en cache jusqu’à 24 heures, un changement demande ce délai.

Ce refus ne vaut que pour lui. Meta-WebIndexer, Meta-ExternalFetcher, Meta-ExternalAds et facebookexternalhit ont chacun leur jeton. Meta rattache la citation d’un site dans les réponses de Meta AI à Meta-WebIndexer, pas à ce robot. Et bloquer facebookexternalhit par confusion prive les liens partagés de leur aperçu sans rien changer à l’entraînement.

Le reconnaître dans les journaux

Il s’annonce en minuscules : meta-externalagent/1.1, seul ou suivi entre parenthèses de l’adresse de la page de documentation. La correspondance d’un groupe de robots.txt ne tenant pas compte de la casse, Meta-ExternalAgent et meta-externalagent désignent le même groupe ; l’exemple de Meta emploie les minuscules. Faute d’adresses publiées, un passage ne se contrôle que par recoupement : volume, régularité, respect des règles.

Le sujet, traité en entier

Sources

  1. Meta for Developers — Meta Web Crawlers Finalité de Meta-ExternalAgent, chaînes d’agent utilisateur, exemple de robots.txt, cache de 24 heures. Page datée du 21 mai 2026. Elle répond par une erreur à une requête sans en-têtes de navigateur ; lue en texte brut, avec ces en-têtes, le 20 novembre 2026.
  2. RFC 9309 — Robots Exclusion Protocol La correspondance entre un robot et la ligne User-agent ne tient pas compte de la casse. Source reprise du lexique du site.

Page revue le

Et sur votre site ?

Cette question se pose chez vous ?

Décrivez votre situation : nous répondons par écrit, avec une première lecture de ce qu’il faudrait regarder d’abord.

Voir le diagnostic

Vous recevez un premier avis écrit et le prix du diagnostic.
4,9/5 sur 34 avis Google. Réponse écrite, sans relance commerciale. Vos données ne servent qu’à vous répondre.