Des chercheurs ont présenté Vanguard, un système qui vérifie les actions proposées par de petits modèles d’IA avant qu’un agent web, mobile ou domestique ne les exécute. Il examine l’action proposée et la capture d’écran, puis conserve cette proposition ou demande à un modèle plus grand d’en formuler une autre.
Lors des tests des chercheurs, les propositions d’un modèle de 2 milliards de paramètres vérifiées par Vanguard étaient au moins aussi précises que celles du modèle cible de 8 milliards de paramètres, et plus précises sur deux benchmarks cités. Le modèle plus grand n’a rédigé qu’une minorité des étapes.
Pourquoi c'est important
Pour les équipes qui développent des agents web ou mobiles, Vanguard pourrait réduire le nombre d’appels à un modèle plus grand sans sacrifier la précision dans les tâches testées. On ignore encore si ces résultats se confirmeront dans des produits déployés.