研究者らは、タスクの説明とRGB-D画像1枚（カラー画像と深度データを組み合わせた画像）を使い、ロボットが物体をどう把持するかを選ぶシステム「TGrasp6D」を発表した。たとえば、ナイフで切る場合は柄を持つようにし、人に手渡す場合は柄を空けておくといった使い分けができる。
論文によると、TaskGraspデータセットでの成功率は94％で、最も成績の良かったベースラインの74％を上回った。チームは実物の物体を使い、Franka Research 3ロボットで手法を実演した。ただし、試行回数や独立した検証について、論文要旨に詳細は記載されていない。
なぜ重要か
ロボット工学の研究者にとって、今回の結果は、タスクと物体の組み合わせごとに手作業でラベル付けしたデータセットを用意しなくても、タスクの説明と深度画像1枚を使ってロボットが把持方法を選べる可能性を示している。ただし、今回報告されたテストを超える性能は確認されていない。
