La verifica autonoma riduce il bias di approvazione nei modelli multimodali

Moises Andrade e i suoi colleghi presentano SGV, una tecnica di verifica per i modelli multimodali che prima chiede al modello di elencare le caratteristiche di un comportamento corretto e poi valuta una specifica azione confrontandola con quell’elenco. Lo studio mostra che il metodo riduce la tendenza dei modelli ad approvare troppo spesso le azioni, definita bias di approvazione, e aumenta fino a 25 punti percentuali il rilevamento degli errori e di 14 punti percentuali la precisione complessiva. Applicati a uno specialista di interfacce grafiche in OSWorld, a una policy di diffusione in RoboMimic e a un agente ReAct in VisualWebArena, i verificatori migliorano il completamento delle attività di circa 20 punti percentuali rispetto ai migliori risultati precedenti.