Meta-ExternalAgent

Crawler de Meta pour la collecte de données d'IA (Llama, Meta AI).

Meta-ExternalAgent est le robot déclaré par Meta pour explorer le web à des fins d'entraînement et d'amélioration de ses produits d'IA, dont les modèles Llama et l'assistant Meta AI. C'est l'agent de collecte de fond du groupe.

Il s'accompagne d'un agent complémentaire, Meta-ExternalFetcher, qui gère des récupérations liées à des actions utilisateur plutôt qu'à une exploration planifiée. Cette séparation, désormais habituelle, distingue la collecte de masse de la consultation ponctuelle déclenchée à la demande — deux finalités, deux comportements, deux décisions.

Pour le praticien, ces agents se pilotent dans le robots.txt au même titre que les autres crawlers d'IA comme GPTBot. Il faut toutefois veiller à l'historique des dénominations : Meta a fait évoluer ses user-agents, et d'anciennes configurations peuvent viser un nom obsolète tout en laissant passer le nouveau. Tenir la liste à jour et vérifier les logs évite ce décalage silencieux.