Uma equipe de pesquisadores de várias instituições lançou o MAI-Gym, uma plataforma de código aberto para criar, testar e treinar agentes de IA que interagem com interfaces gráficas (GUIs). O código, os dados e um checkpoint de modelo com 9 bilhões de parâmetros já estão disponíveis para download. O MAI-Gym funciona em celulares, computadores e navegadores da web e pode executar até 20.000 ambientes em paralelo.
O que o MAI-Gym oferece?
A plataforma inclui um pipeline compartilhado de execução que mantém o comportamento dos agentes idêntico durante a avaliação e o treinamento por aprendizado por reforço (RL). Ela vem com dez conjuntos de benchmarks consolidados e 2.000 tarefas verificadas, que abrangem aplicativos de reserva de passagens, e-mail e telas de configurações. O MAI-Gym também pode criar automaticamente novos aplicativos simulados, gerando ambientes que podem ser reiniciados e cenários que conectam vários aplicativos, todos verificados para garantir a execução correta.
Resultados com o modelo 9B lançado
Com a estrutura, os autores treinaram o MAI-Gym-9B, um agente unificado para uso em celulares e computadores. No benchmark MobileWorld, o modelo obteve 78.4 % de sucesso; no OSWorld-Verified, chegou a 76.2 %. Em um teste de transferência, o agente aprendeu a reservar uma passagem em um aplicativo simulado e depois realizou a mesma tarefa em um celular real, elevando a taxa de sucesso de 28.8 % para 48.1 %.
Por que importa
Agora, desenvolvedores podem treinar assistentes de IA que funcionam em celulares, computadores e navegadores sem precisar criar uma infraestrutura enorme do zero. Os dados e o modelo abertos permitem que pesquisadores testem novas ideias rapidamente, e o resultado do teste de transferência sugere que o treinamento em aplicativos simulados pode melhorar o desempenho no mundo real.
