Onderzoekers hebben Vanguard geïntroduceerd, een systeem dat actiesuggesties van kleinere AI-modellen controleert voordat een agent voor websites, telefoons of slimme apparaten ze uitvoert. Het bekijkt de voorgestelde stap en de schermafbeelding en neemt het voorstel vervolgens over of vraagt een groter model om een vervangende actie te formuleren.
In de tests van de onderzoekers was een conceptmodel met 2 miljard parameters, beoordeeld door Vanguard, minstens zo nauwkeurig als het doelmodel met 8 miljard parameters. Op twee genoemde benchmarks scoorde het zelfs beter. Het grotere model formuleerde slechts een minderheid van de stappen.
Waarom het ertoe doet
Voor teams die agents voor websites of telefoons ontwikkelen, kan Vanguard het aantal aanroepen van een groter model verminderen zonder dat de nauwkeurigheid bij de geteste taken achteruitgaat. Of dat ook geldt voor producten in de praktijk, is nog onbekend.