/ Модель
Каталог

Характеристики

Лицензия
CreativeML OpenRAIL-M
Опубликована
6 ноя 2022

Ссылки

Hugging Face

Cats-Musical-diffusion

dallinmackay
Генерация изображенийТекст → изображение3 профессии

Дообученная Stable Diffusion v1.5 для генерации изображений в стиле фильма «Кошки» (2019).

42скачиваний за 30 дней44лайкавеса обновлены16 мая 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Изображения» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели сгенерируют результат по каждой задаче. Опубликованный тест появится на этой странице.

Открыть конструктор бенчмарка

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Cats the Musical Diffusion — дообученная DreamBooth модель Stable Diffusion v1.5 от автора dallinmackay, обученная на кадрах фильма «Кошки» (2019). Она генерирует изображения по текстовым запросам и переносит на персонажей визуальный стиль фильма; для активации стиля автор рекомендует начинать запрос с токена ctsmscl. Модель предназначена для создания стилизованных изображений людей и персонажей в образе кошек, а также экспериментов с визуальной эстетикой фильма.

Модель распространяется в форматах Diffusers и PyTorch по лицензии CreativeML OpenRAIL-M. Автор отмечает, что для сходства с реальными людьми результаты нестабильны и требуют подбора запросов и настроек; приведённые примеры отобраны из небольшого числа удачных генераций. Рекомендуется sampler Euler.

Сценарии применения

  • генерация людей в образах кошачьих персонажей из фильма «Кошки»
  • создание изображений персонажей в стиле фильма «Кошки»
  • стилизация персонажей и известных героев под визуальную эстетику фильма
  • эксперименты с текстовыми запросами для генерации необычных кошачьих образов

Ограничения

Сходство с реальными людьми получается нестабильно: автор сообщает, что удачных результатов было около 10% и рекомендует экспериментировать с запросами и весами стиля. Для генерации рекомендуется sampler Euler.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии
IV.9Отраслевые задачиМедиа, журналистика, культура, архивы и игрыAI помогает создавать, искать, сохранять и персонализировать медиа, культурный и игровой контент.44 задачи14 938моделейI.10Универсальные способностиВидео, анимация и 3DAI помогает создавать, анализировать и преобразовывать динамический визуальный контент и 3D-сцены.18 задач3 279моделейI.8Универсальные способностиИзображения и компьютерное зрениеAI помогает извлекать визуальные признаки, изменять изображения и создавать новые визуальные материалы.17 задач6 331модель

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Cats the Musical Diffusion

This is a fine-tuned Stable Diffusion model (based on v1.5) trained on screenshots from the film Cats (2019). Use the token ctsmscl at the BEGINNING of your prompts to use the style (e.g., "ctsmscl, thanos"). This model works best with the Euler sampler (NOT Euler_a). It will take some experimenting to get good results, my sample images are heavily cherry-picked this time (~10% success rate for likeness of real people). Use (prompt) [weighting] to balance the style with the character.

CKPT download link

The model you didn't ask for, and didn't know you needed. Trained on the horribly uncanny musical, Cats, which was based on an even more horrible previous version, which was based on a horrible live stage musical. It has endured all opposition, and who am I to stand in it's way? This model is inevitable.

--

Cat people rendered with this model:

prompt and settings used: (ctsmscl), [person] | Steps: 45, Sampler: Euler, CFG scale: 5 Character Samples

--

Roughly the entire main cast of Game of Thrones as cats: Character Samples2

--

This model was trained with Dreambooth, using TheLastBen colab notebook

🧨 Diffusers

This model can be used just like any other Stable Diffusion model. For more information, please have a look at the Stable Diffusion.

You can also export the model to ONNX, MPS and/or FLAX/JAX.

License

This model is open access and available to all, with a CreativeML OpenRAIL-M license further specifying rights and usage. The CreativeML OpenRAIL License specifies:

  1. You can't use the model to deliberately produce nor share illegal or harmful outputs or content
  2. The authors claims no rights on the outputs you generate, you are free to use them and are accountable for their use which must not go against the provisions set in the license
  3. You may re-distribute the weights and use the model commercially and/or as a service. If you do, please be aware you have to include the same use restrictions as the ones in the license and share a copy of the CreativeML OpenRAIL-M to all your users (please read the license entirely and carefully) Please read the full license here

-- Become A Patreon

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Ревизия весов
90d20ad

0 моделей

    Создать бенчмарк