/ Модель

Характеристики

Размер весов
76,3 ГБ
Лицензия
Apache 2.0
Базовая модель
MiniMax-H3
Библиотека
diffusers
Опубликована
7 авг 2026

minimax_h3_ref2va_fp8_e4m3fn

Видео из изображенияИзображение, текст → видео3 профессии

MiniMax H3 Ref2VA — это квантованная диффузионная модель для генерации видео и синхронизированного аудио по референсному изображению или другим мультимодальным входным данным.

7 629скачиваний за 30 дней4лайкавеса обновлены8 авг 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель основана на MiniMaxAI/MiniMax-H3, разработана сообществом и опубликована пользователем rzgar. Она интегрируется с библиотекой Diffusers и ориентирована на сценарии text-to-video, image-to-video, image-text-to-video, video-to-video, а также генерацию аудио-видео и преобразование аудио-видео с использованием текста, изображений, видео и аудио.

Доступны две квантованные версии: fp16attn_fp8 размером 28,7 ГБ и mxfp8 размером 47,6 ГБ. В первой варианте attention-слои работают в FP16, а MLP — в FP8-E4M3 с масштабированием по тензору; во второй используются MXFP8 и блочное масштабирование по 32 элемента, обеспечивающее более точную обработку выбросов. Пути текстового conditioning, включая token_refiner, conditioning projections и audio heads, сохраняются в полной точности. Модель поддерживает мультимодальную генерацию и синхронизированные аудио-видео результаты; рекомендуемое число шагов зависит от сценария: около 5 для говорящих лиц с небольшим движением, 8 для сбалансированного результата и более 12 для насыщенных действиями сцен.

Версия fp16attn_fp8 лучше подходит для повседневного использования, быстрой загрузки и меньшего потребления памяти, тогда как mxfp8 ориентирована на максимальное качество при квантовании. Ограничения включают значительный размер файлов и потребность в совместимом окружении для запуска квантованных форматов. Модель распространяется по лицензии Apache-2.0.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

MiniMax H3 Ref2VA (mxfp8 & fp16attn_fp8)

Quantized versions of the MiniMax H3 Ref2VA (reference-to-video-audio) diffusion model. Both keep the text-conditioning path (token_refiner, conditioning projections, audio heads) in full precision.

Latest comfy version improves audio quality at low steps.

minimal 5 step (talking heads, less motions) | balanced 8-steps (shift 8) | Action-rich scenes above 12 (shift max 12)

FileDownloadNote
minimax_h3_ref2va_fp16attn_fp8.safetensorsDownload 28.7GBFP16 attention + FP8-E4M3 MLP
minimax_h3_ref2va_mxfp8.safetensorsDownload 47.6GBE4M3 weights, E8M0 block scales

Comparison

fp16attn_fp8mxfp8
Size28.7 GB47.6 GB
Base checkpointpruned fp8_scaled (curve-form, adaln_t_table)full bf16 (time-embedder)
Attention (qkv/out)FP16 (exact)MXFP8 (block-quantized)
MLP (fc1/fc2)FP8-E4M3 per-tensor absmaxMXFP8 block-quantized
Quant scale granularityper-tensorper-32 block (better outlier handling)
input_scalecalibrated (fc1), fpmm on fc21.0 identity (150 layers)
token_refiner / conditioningfull precisionfull precision
Relative precisionhigher than pruned fp8, attn losslesshighest of the two (finer scales)
Memory footprintlighter (faster load, less streaming)heavier
Best foreveryday use / speed-first setupsmaximum quality per weight bit

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · diffusers

Нельзя запустить

Модели «картинка → видео» пока не запускаются: нужен ввод изображения для diffusion.

Ревизия весов
f688879

0 моделей