/ Модель

Характеристики

Лицензия
CreativeML OpenRAIL-M
Библиотека
diffusers
Опубликована
6 дек 2022

AnimeDiffusion

Генерация изображенийТекст → изображение3 профессии

Латентная диффузионная модель, дообученная на основе Vintedois для создания изображений по текстовым запросам, в том числе в аниме-стилистике.

17скачиваний за 30 дней11лайковвеса обновлены13 фев 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Изображения» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели сгенерируют результат по каждой задаче. Опубликованный тест появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Anime Diffusion2 — латентная диффузионная модель для генерации изображений по текстовым запросам, созданная на основе Vintedois (22h) Diffusion model. Модель дообучена на подписях BLIP для набора Danbou, материалах по Demon Slayer и артах с 4ch; в карточке приведён пример запроса с персонажем в аниме-стилистике и кинематографическим освещением.

Модель предназначена для развлекательной генерации изображений и использования в качестве помощника для генеративного искусства. Она распространяется в форматах Diffusers и PyTorch, использует библиотеку Diffusers и лицензию CreativeML OpenRAIL-M. Карточка указывает английский язык; сведения о размере модели и длине контекста не приведены.

Сценарии применения

  • создание аниме-портретов по текстовому описанию
  • генерация иллюстраций с кинематографическим освещением
  • создание изображений персонажей Demon Slayer
  • эксперименты с генеративным искусством
  • создание развлекательных изображений по промптам

Ограничения

Результаты зависят от формулировки текстового запроса; качество и поведение модели на сценариях за пределами описанных обучающих данных не охарактеризованы.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

image pink hair guy in glasses, photograph, sporty body, cinematic lighting, clear eyes, perfect face, blush, beautiful nose, beautiful eyes, detailed eyes

Anime Diffusion

Anime Diffusion2 is a latent text-to-image diffusion model based on Vintedois (22h) Diffusion model trained on BLIP captions for Danbou set + Demon slayer + arts from 4ch

Model Description

License

This model is open access and available to all, with a CreativeML OpenRAIL-M license further specifying rights and usage. The CreativeML OpenRAIL License specifies:

  1. You can't use the model to deliberately produce nor share illegal or harmful outputs or content
  2. The authors claims no rights on the outputs you generate, you are free to use them and are accountable for their use which must not go against the provisions set in the license
  3. You may re-distribute the weights and use the model commercially and/or as a service. If you do, please be aware you have to include the same use restrictions as the ones in the license and share a copy of the CreativeML OpenRAIL-M to all your users (please read the license entirely and carefully) Please read the full license here

Downstream Uses

This model can be used for entertainment purposes and as a generative art assistant.

Example Code

import torch
from torch import autocast
from diffusers import StableDiffusionPipeline

pipe = StableDiffusionPipeline.from_pretrained(
    'AlexWortega/AnimeDiffuion2',
    torch_dtype=torch.float32
).to('cuda')

negative_prompt = """low-res, duplicate, poorly drawn face, ugly, undetailed face"""
d = 'white girl'
prompt = f"pink hair guy in glasses, photograph, sporty body, cinematic lighting, clear eyes, perfect face, blush,  beautiful nose, beautiful eyes, detailed eyes" 
num_samples = 1

with  torch.inference_mode():
    images = pipe([prompt] * num_samples,
                  negative_prompt = [negative_prompt]*num_samples,
                  height=512, width=512,
                  num_inference_steps=50,
                  guidance_scale=8,
                  ).images


    
images[0].save("test.png")

Team Member and Acknowledgements

This project would not have been possible without the incredible work by the CompVis Researchers.

In order to reach me, here is my blog:

![My tg channel]

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · diffusers

Можно запустить

Подбираем GPU…

Ревизия весов
90c1290

0 моделей