Forskare föreslår en videokodek som använder robotens ledtillstånd, modell och kamerakalibrering för att förutsäga hur dess egna rörelser förändrar kamerabilden. Rörelsesignalen som delas kräver inga extra videobitar och hjälper kodeken att skicka mindre videomaterial över en anslutning med begränsad bandbredd.
I tester med LIBERO rapporterar forskarna att OpenVLA-OFT:s framgång i uppgifter ökade från 22.8% till 43.1% vid 6 kbps, jämfört med en kodek som använder tidigare bildrutor. Arbetet är en förpublicerad studie; författarna säger att kod och kompletterande material släpps efter formell publicering.
Varför det spelar roll
För team som kör robotpolicyer på fjärrservrar tyder de rapporterade resultaten på att rörelsemedveten videokomprimering kan öka framgången i uppgifter när bandbredden för kamerans upplänk är begränsad. Prestandan i verkliga miljöer återstår att fastställa.
