Исследователи представили TGrasp6D — систему, которая по описанию задачи и одному RGB-D-снимку (цветному изображению с данными о глубине) определяет, как роботу следует захватить объект. Например, при нарезке ножом система может выбрать захват за рукоятку, а при передаче ножа — оставить рукоятку свободной.
В статье сообщается, что на наборе данных TaskGrasp система успешно справилась в 94% случаев; лучший базовый метод показал результат 74%. Команда также продемонстрировала работу подхода на роботе Franka Research 3 с реальными объектами, однако в аннотации не указаны ни число испытаний, ни результаты независимого тестирования.
Почему это важно
Для исследователей в области робототехники эти результаты говорят о том, что описания задач и одного снимка с данными о глубине могут помочь роботам выбирать способ захвата, не полагаясь на набор данных с ручной разметкой для каждой пары «задача — объект». Однако эффективность за пределами описанных испытаний пока не установлена.