/ Модель

Характеристики

Лицензия
Своя лицензия
Опубликована
18 дек 2024

LTX-Video-0.9.1-HFIE

Видео из изображенияИзображение, текст → видео3 профессии

Форк LTX-Video 0.9.1 для развертывания на Hugging Face Inference Endpoints и генерации видео по изображению или тексту с настройками обработки результата.

483скачиваний за 30 дней3лайкавеса обновлены24 фев 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Это форк LTX-Video 0.9.1 от jbilcke-hf, подготовленный для развертывания на Hugging Face Inference Endpoints. Он использует Diffusers и обёртку varnish, чтобы запускать генерацию видео по изображению; README также описывает режим генерации по текстовому запросу. Обёртка рассчитана на управляемый запуск и предоставляет настройки для масштабирования, интерполяции кадров, добавления киноплённого зерна и сжатия.

Для развертывания автор рекомендует GPU NVIDIA L40S с 48 ГБ видеопамяти и загрузку всех файлов модели, включая файлы .pth. Одновременная работа текстового и графического режимов увеличивает расход памяти. Репозиторий поддерживает Diffusers и safetensors; лицензия указана как other, конкретные условия следует проверять в исходном репозитории LTX-Video.

Сценарии применения

  • генерация видео на основе исходного изображения
  • создание видео по текстовому запросу через развернутый Inference Endpoint
  • масштабирование сгенерированного видео
  • интерполяция кадров видео
  • настройка зернистости и сжатия видео

Ограничения

Для развертывания рекомендуется GPU NVIDIA L40S с 48 ГБ видеопамяти; загрузка всех файлов модели необходима для корректной работы. Одновременная активация текстового и графического режимов увеличивает потребление памяти; условия лицензии other требуют проверки.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

This is a special fork of LTX-Video designed to facilitate deployment to the Inference Endpoints, using diffusers + varnish.

If you want to know how to use it once you've deployed it, please refer to this Python demo:

https://huggingface.co/jbilcke-hf/LTX-Video-for-InferenceEndpoints/blob/main/example.py

Why?

Using the Hugging Face Inference Endpoints gives you with reliable and controllable availability.

The goal of this wrapper is to offer flexibility and low-level settings, to add things such as upscaling, interpolation, film grain, and compression controls.

Setup on Hugging Face Inference Endpoints

Pick a large machine

It is recommended to use at least a NVIDIA L40S with 48 Gb of VRAM.

Downloads all assets

Make sure to select "Download everything" when selecting the model.

Otherwise some files ending in .pth won't be downloaded.

Select Text-to-Video or Image-to-Video

By default the handler will do Text-to-Video.

To do Image-Text-To-Video, you need to set the environment variable SUPPORT_INPUT_IMAGE_PROMPT to a trueish value (eg 1, True).

It is possible to support both pipelines at the same time if you modify the handler.py.

But if you keep both pipelines active in parallel, this will consume more memory.

Using private LTX-Video LoRAs

If you plan on using private LoRA models you will have to set the HF_API_TOKEN environment variable.

Credits

For more information about this model, please see the original HF repository here.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

Модели «картинка → видео» пока не запускаются.

Ревизия весов
ffd9d14

0 моделей