Исследователи опубликовали HumanVerse — набор из 500 часов видео от первого лица, дополненный данными о движениях всего тела и рук. Они также представили λ0 — базовую модель для гуманоидных роботов, обученную на этих данных. Модель испытали на роботе Unitree G1: она показала успешность 90.0% в тесте SIMPLE и 62.5% в реальных задачах передвижения с манипуляциями — и всё это без демонстраций, собранных специально для робота.
Почему это важно
Датасет и модель позволяют разработчикам обучать гуманоидных роботов манипуляциям всем телом, не собирая дорогостоящие демонстрации на роботах.