I ricercatori propongono un codec video che usa gli stati articolari del robot, il suo modello e la calibrazione della camera per prevedere come i suoi movimenti modificano ciò che questa inquadra. Il segnale di movimento condiviso non aggiunge dati video e aiuta il codec a trasmettere meno immagini su una connessione con banda limitata.
Nei test con LIBERO, i ricercatori riferiscono che il tasso di successo di OpenVLA-OFT nei compiti è salito dal 22.8% al 43.1% a 6 kbps, rispetto a un codec condizionato dalla cronologia dei fotogrammi. Il lavoro è un preprint; gli autori dichiarano che il codice e il materiale supplementare saranno pubblicati dopo la pubblicazione formale.
Perché conta
Per i team che eseguono policy robotiche su server remoti, i risultati riportati suggeriscono che la compressione video basata sul movimento potrebbe aumentare il tasso di successo nei compiti quando la banda in uplink della videocamera è limitata; le prestazioni nel mondo reale restano da verificare.
