Модель преобразует исходное видео в видео с говорящим аватаром, синхронизируя движения лица с аудиодорожкой и сохраняя движения тела, камеры и фона.

Подходит для: анимация лица в исходном видео по аудиозаписи · создание говорящего аватара с сохранением движений тела и фона · синхронизация лица персонажа с речевой дорожкой

safetensors: формат, квантизация, runtime и память принадлежат одному artifact

Модель создаёт синхронизированное с аудио видео говорящего аватара в разрешении 720p по референсному изображению.

Подходит для: создание говорящего аватара по портрету и записи речи · синхронизация движения губ с аудиодорожкой · генерация озвученного портретного видео

Nocturne v1.2d — AST-модель для классификации биоакустических записей и распознавания видов насекомых и земноводных.

Подходит для: распознавание видов насекомых по полевым аудиозаписям · классификация звуков цикад и прямокрылых · распознавание бесхвостых земноводных по их вокализациям