Она может генерировать короткие видео с движущимися объектами.
До этого с её помощью можно было создавать анимации, которые «выглядели так, будто двигалась камера, но не объект».
Бета-версия нейросети YandexART (Vi) доступна в приложении «Шедеврум», рассказали в компании. Она способна генерировать пятисекундные видео по текстовому описанию.
После получения запроса модель создаёт картинку, с которой будет начинаться ролик. Затем она постепенно превращает цифровой шум в последовательность кадров, опираясь на изображение и промпт пользователя.
По словам компании, модель научилась учитывать связь между кадрами, что позволяет ей генерировать более реалистичные и плавные видео с движущимися объектами — например, бег собаки, падение листа с дерева или взрыв фейерверка.
Источник: VC.RU
Читайте также
