Un gruppo di ricercatori di diverse istituzioni ha rilasciato MAI-Gym, una piattaforma open source per creare, testare e addestrare agenti AI che interagiscono con interfacce grafiche (GUI). Il codice, i dati e un checkpoint di un modello da 9 miliardi di parametri sono disponibili da subito per il download. MAI-Gym funziona su smartphone, computer desktop e browser web e può eseguire fino a 20.000 ambienti in parallelo.
Cosa offre MAI-Gym?
La piattaforma include una pipeline condivisa per le interazioni degli agenti, che ne mantiene identico il comportamento durante la valutazione e l’addestramento con apprendimento per rinforzo (RL). Comprende dieci suite di benchmark consolidate e 2.000 attività verificate, che riguardano app per prenotare biglietti, la posta elettronica e le impostazioni. MAI-Gym può anche generare automaticamente nuove app simulate, creando ambienti ripristinabili e scenari che coinvolgono più app, verificandone la corretta esecuzione.
I risultati del modello 9B rilasciato
Usando il framework, gli autori hanno addestrato MAI-Gym-9B, un agente unificato per dispositivi mobili e computer desktop. Nel benchmark MobileWorld il modello ha ottenuto un tasso di successo del 78,4%, mentre in OSWorld-Verified ha raggiunto il 76,2%. In una prova di trasferimento, l’agente ha imparato a prenotare un biglietto in un’app simulata e ha poi svolto la stessa attività su un telefono reale, portando il tasso di successo dal 28,8% al 48,1%.
Perché conta
Gli sviluppatori possono ora addestrare assistenti AI capaci di funzionare su smartphone, PC e browser senza dover costruire da zero infrastrutture enormi. I dati e il modello aperti permettono ai ricercatori di verificare rapidamente nuove idee, mentre i risultati del test di trasferimento suggeriscono che addestrare gli agenti in app simulate può migliorarne le prestazioni nel mondo reale.
