Oossa

机器人视频编码利用运动数据降低上行带宽需求

一篇预印本称,利用关节状态和摄像头数据预测机器人摄像头的视野,可降低视频码率并提高机器人任务成功率。

简讯作者: Oossa 发布日期: 1 分钟阅读

研究人员提出了一种视频编码器,利用机器人的关节状态、模型和摄像头标定数据,预测机器人自身运动会如何改变摄像头画面。共享的运动信号不会增加视频比特数,还能帮助编码器在带宽有限的连接中减少视频传输量。

在 LIBERO 测试中,研究人员报告称,在 6 kbps 下,与一种基于历史信息的编码器相比,OpenVLA-OFT 的任务成功率从 22.8% 提高到 43.1%。这项研究目前是一篇预印本;作者表示,正式发表后将发布代码和补充材料。

为什么重要

对于在远程服务器上运行机器人策略的团队来说,报告中的提升表明,在摄像头上行带宽紧张时,利用运动信息的视频压缩有望提高任务成功率;其在现实环境中的表现仍有待验证。

这篇文章有帮助吗?
分享

继续阅读

Oossa · 新闻简报

一周 AI,讲明白

每周一,用通俗的语言讲清值得知道的新闻。免费,无垃圾邮件。