Des chercheurs proposent un codec vidéo qui s’appuie sur les états articulaires du robot, son modèle et l’étalonnage de sa caméra pour prédire les changements de vue provoqués par ses propres mouvements. Ce signal de mouvement partagé n’ajoute aucun bit vidéo et permet au codec de transmettre moins d’images sur une connexion à bande passante limitée.
Lors de tests avec LIBERO, les chercheurs indiquent que le taux de réussite d’OpenVLA-OFT est passé de 22.8% à 43.1% à 6 kbps, par rapport à un codec conditionné par l’historique. Ces travaux sont présentés dans un préprint ; leurs auteurs précisent que le code et les documents complémentaires seront publiés après la publication officielle.
Pourquoi c'est important
Pour les équipes qui exécutent des politiques robotiques sur des serveurs distants, les gains annoncés laissent penser qu’une compression vidéo tenant compte des mouvements pourrait améliorer la réussite des tâches lorsque la bande passante montante de la caméra est limitée. Les performances en conditions réelles restent à établir.
