/ Модель

Характеристики

Лицензия
CC BY-NC 4.0
Опубликована
3 мая 2023

animov-512x

Генерация видеоТекст → видео3 профессии

Дообученная на основе ModelScope модель Diffusers для генерации видео в стиле аниме по текстовым запросам с разрешением 512×512.

24скачиваний за 30 дней27лайковвеса обновлены7 июн 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Видео» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели сгенерируют результат по каждой задаче. Опубликованный тест появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

animov-512x — модель преобразования текста в видео, опубликованная strangeman3107 и дообученная на основе ModelScope для генерации видео в стиле аниме. Она предназначена для создания коротких видеосцен по текстовым запросам; для характерного результата в запрос рекомендуется добавлять слово «anime». Модель обучена для разрешения 512×512 и распространяется в форматах Diffusers и PyTorch.

Автор предупреждает, что модель пока нестабильна и результаты могут быть непредсказуемыми, в том числе неприятными. Рекомендуемый негативный запрос включает «noise, text, nude». Лицензия репозитория — CC BY-NC 4.0; ограничения использования также связаны с правилами исходной модели ModelScope.

Сценарии применения

  • генерация аниме-видео по текстовому описанию
  • создание видеосцен с персонажами и окружением в стиле аниме
  • быстрые эксперименты с text-to-video в Diffusers

Ограничения

Автор отмечает нестабильность модели и низкое удобство использования; возможны непреднамеренные неприятные результаты. Для использования действуют ограничения исходной модели ModelScope, а лицензия CC BY-NC 4.0 запрещает коммерческое применение.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Overview

This is a text2video model for diffusers, fine-tuned with a ModelScope to have an anime-style appearance.
The model now has a much more anime-style look compared to the previous version.
It was trained at a resolution of 512x512.

example video and prompts

But it is still unstable and the usability is not good yet.
Please note that there is a possibility of unintended unpleasant results!

Prompt

  • Mandatory prompt
    anime
  • Recommended negative prompt
    noise, text, nude

Limitaion

The usage limitation of the model follow the ModelScope rules of the original model.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Ревизия весов
99b4771

0 моделей