Des chercheurs de Princeton, de Stanford, du UK AI Security Institute et de Brookings ont publié une étude intitulée *Emerging Trends in AI Agent Evaluation*. Elle passe en revue 33 tendances concernant les méthodes, les priorités de recherche et l’écosystème de l’évaluation. Les auteurs soulignent que l’évaluation des agents coûte désormais des dizaines de milliers de dollars en crédits cloud et que les outils utilisés pour examiner leurs traces n’ont eux-mêmes pas été testés. Ils préconisent de faire appel à davantage d’évaluateurs issus de différentes disciplines, d’améliorer les bancs d’essai et de mener des tests transparents et indépendants.
Pourquoi c'est important
Les responsables publics et les bailleurs de fonds peuvent s’appuyer sur la liste de contrôle de l’étude pour affecter des ressources à des tests indépendants et transparents des agents IA.
