Модель называется Seaweed-7B, объем её параметров соответствует названию модели.
Функциональность включает следующие возможности:
-
Генерация видео и аудиоконтента одновременно.
-
Создание видеороликов с синхронной речью и движением персонажа ("Omnihuman").
-
Продолжительность ролика — до 20 секунд или одной минуты (при помощи технологии расширения).
-
Разрешение 720p с возможностью апскейла до 2K.
-
Возможность генерации видеопотока формата 720p в режиме реального времени с частотой кадров 24 FPS.
-
Поддержка длинных мультисценарных историй.
-
Преобразование текста в видео (T2V), изображений в видео (I2V). Пользователь имеет возможность задать начальную либо конечную сцену видеоряда.
-
Перенос внешности заданного человеческого лица или объектов на генерируемое видео посредством ссылок на эталонные изображения.
Примеры демонстрируются на указанном ресурсе.