I ricercatori hanno presentato Vanguard, un sistema che verifica i suggerimenti d’azione dei modelli AI più piccoli prima che vengano usati da un agente web, per smartphone o per la casa. Il sistema esamina l’azione proposta e lo screenshot, quindi mantiene la bozza oppure chiede a un modello più grande di scriverne una sostitutiva.
Nei test dei ricercatori, le bozze generate da un modello con 2 miliardi di parametri e valutate da Vanguard erano accurate almeno quanto quelle del modello di riferimento con 8 miliardi di parametri, e più accurate su due benchmark specifici. Il modello più grande ha scritto solo una minoranza delle azioni.
Perché conta
Per chi sviluppa agenti per siti web o smartphone, Vanguard potrebbe ridurre il ricorso a un modello più grande senza compromettere l’accuratezza nei compiti testati; resta da capire se il risultato si confermerà nei prodotti effettivamente utilizzati.