A equipe liderada por Ziqi Cai lançou o SPW-Nav, um modelo de mundo panorâmico em streaming que transforma instruções em linguagem em vídeos 360° ao vivo. O sistema parte de um panorama inicial e segue comandos como “vire à esquerda” ou “avance”, mantendo alta qualidade de vídeo. Para evitar que a imagem se desvie ao longo de transmissões prolongadas, o sistema usa rotação esférica e condicionamento alinhado à pose. A equipe também lançou o SPW-NavSet, um conjunto de dados de vídeos panorâmicos com trajetórias de câmera e instruções verificadas.
Por que importa
O sistema poderia permitir que aplicativos de realidade virtual criassem passeios sob demanda a partir de uma única foto, reduzindo a necessidade de imagens pré-gravadas.
