ONNX Runtime-сборка AVTR-1 для генерации видео говорящего аватара по портрету и аудио.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
Henilpranik подготовил сборку AVTR-1 для ONNX Runtime: модель аватара экспортирована в графы ONNX и приведена к float32, а веса рендерера оставлены без изменений относительно исходных. Сборка предназначена для генерации видео говорящего аватара по портрету и речи; базовая модель AVTR-1 анимирует изображение в соответствии с аудиодорожкой. Репозиторий организован так, чтобы его содержимое можно было загрузить в локальное хранилище AVTR-1.
Модель распространяется в форматах ONNX и safetensors; сведения о лицензии, поддерживаемых языках и ограничениях в предоставленных источниках отсутствуют.
В README описана сборка ONNX Runtime, но сведения о лицензии и языках модели отсутствуют в предоставленных данных.
README от автора на Hugging Face, как он его опубликовал
Every model from avaturn-live/avtr-1 as ONNX,
runnable without TensorRT. The motion model (avtr1.scripted.pt) is exported to two ONNX
graphs and forced to float32; renderer weights are upstream files, unmodified.
Mirrors $AVTR1_LOCAL_STORAGE/main/, so a download drops straight in:
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм · onnxruntime
Модель выложена только в формате ONNX.