由Yunze Liu带领的研究团队发布了Robota-Embed,这是一款面向机器人的视觉-语言-动作嵌入模型。它将当前状态、视觉输入和动作一并编码,再检索相匹配的过往执行过程作为上下文。在测试中,该模型将DROID‑Sim基准上的成功率从47%提高到56%,并将LIBERO困难子集上的成功率从86%提升至93%。它还帮助一个参数冻结的GPT‑6 Astra策略在五项ManiSkill任务中取得68%的成功率,而单独使用该策略时成功率为24%。
为什么重要
机器人开发者可以借助Robota-Embed提升任务表现,而无需重新训练策略,从而节省算力和数据采集成本。