Oossa

MAI-Gym平台发布,可用于训练和测试GUI智能体

研究人员推出开放框架,支持开发者大规模训练和评估操作手机、电脑及网页界面的AI智能体。

作者: Oossa 发布日期: 1 分钟阅读

Jonathan Francisca · Unsplash

来自多家机构的研究人员发布了MAI-Gym,这是一个开源平台,可用于构建、测试和训练能够操作图形用户界面(GUI)的AI智能体。代码、数据和一个90亿参数的模型检查点现已开放下载。MAI-Gym支持手机、台式电脑和网页浏览器,最多可并行运行20,000个环境。

MAI-Gym提供哪些功能?

该平台配备统一的执行流程管线,确保智能体在评估和强化学习(RL)训练期间的行为保持一致。平台内置10套成熟的基准测试,以及2,000项经过验证的任务,涵盖订票、电子邮件和设置界面等应用场景。MAI-Gym还可以自动生成新的模拟应用,创建可重置的环境和跨应用场景,并检查任务是否正确执行。

已发布的9B模型表现如何

研究人员利用该框架训练了MAI-Gym-9B,这是一个可同时用于手机和桌面的通用智能体。在MobileWorld基准测试中,该模型的成功率为78.4%,在OSWorld-Verified上达到76.2%。在一项迁移测试中,智能体先在模拟应用中学会订票任务,随后在真实手机上执行同一任务,成功率从28.8%升至48.1%。

为什么重要

开发者现在可以训练能在手机、PC和浏览器上运行的AI助手,无需自行搭建庞大的基础设施。开放的数据和模型有助于研究人员快速测试新想法,而迁移测试结果也表明,在模拟应用中训练可能提升智能体在现实环境中的表现。

这篇文章有帮助吗?
分享

继续阅读

Oossa · 新闻简报

一周 AI,讲明白

每周一,用通俗的语言讲清值得知道的新闻。免费,无垃圾邮件。