Oossa

PhyEvolve добавляет физическое планирование в текстовые запросы для видео

Новая мультиагентная система повышает физическую согласованность сгенерированных видео и улучшает результаты тестов примерно на 8 %.

ЗаметкаАвтор: Опубликовано Oossa: 1 мин чтения

Исследователи во главе с Лисином Таном представили PhyEvolve — систему из трёх агентов, которая переписывает текстовые запросы для генерации видео, добавляя в них явные изменения физического состояния. Агенты — Director, Physical Evolver и Composer — планируют причинно-следственные переходы и передают их существующим генераторам видео без дополнительного обучения. Испытания на четырёх крупных бенчмарках показали в среднем на 7,9 пункта более высокий результат, чем у прежнего лучшего агентного метода.

Почему это важно

Авторы видео могут получать ролики, подчиняющиеся реалистичным законам физики, без создания новых моделей ИИ.

Эта статья была полезной?
Поделиться

Читайте также

Oossa · Рассылка

Неделя ИИ — простыми словами

Каждый понедельник: главное за неделю понятным языком. Бесплатно, без спама.