Il team guidato da Ziqi Cai ha presentato SPW-Nav, un modello streaming di ambienti panoramici che trasforma le indicazioni in linguaggio naturale in video a 360° in tempo reale. Parte da un unico panorama iniziale e può seguire istruzioni come «gira a sinistra» o «vai avanti», mantenendo alta la qualità video. Il sistema usa la rotazione sferica e un condizionamento allineato alla posa per evitare derive durante le sequenze più lunghe. Il team ha inoltre pubblicato SPW-NavSet, un dataset di video panoramici con traiettorie della videocamera e istruzioni verificate.
Perché conta
Potrebbe permettere alle app VR di creare tour al volo a partire da una singola foto, riducendo la necessità di filmati preregistrati.
