Оливер Хаусдорфер и его команда представили новую модель скрытых действий, которая использует синхронизированные изображения с двух камер. Модель точнее определяет действия с 6 степенями свободы: точность декодирования выросла на 17% по сравнению с версиями, использующими один ракурс. При интеграции в алгоритм управления роботом успешность выполнения тестовых задач выросла на 13,5%, тогда как у базовой модели с одним ракурсом — на 6,2%. В испытаниях в реальных условиях, где робот копировал движения человеческих рук, двухракурсная модель обеспечила на 20% больше успешных попыток из 850.
Почему это важно
Благодаря этому роботы могут осваивать новые навыки по обычным видео, используя меньше демонстраций. Это поможет лабораториям, у которых мало данных телеуправления.