/ Модель

Характеристики

Лицензия
CreativeML OpenRAIL-M
Опубликована
21 ноя 2022

2d-art-sprites

Генерация изображенийТекст → изображение3 профессии

DreamBooth-модель Stable Diffusion для генерации полнофигурных персонажей в стилизованном 2D-арт-стиле.

46скачиваний за 30 дней11лайковвеса обновлены16 мая 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Изображения» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели сгенерируют результат по каждой задаче. Опубликованный тест появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

2d-art-sprites — модель генерации изображений, созданная ana-tamais методом DreamBooth на базе Stable Diffusion с использованием ноутбука fast-DreamBooth от TheLastBen. Она предназначена для создания полнофигурных персонажей в стилизованном 2D-арт-стиле: например, волшебников, паладинов и целителей. В README рекомендуются запрос со стилевым триггером «2dart», белым или пустым фоном, guidance scale 9–10, сэмплер Euler и 60 шагов.

Модель лучше подходит для изображений живых гуманоидных персонажей; генерация неодушевлённых предметов, таких как мечи, зеркала и свечи, работает хуже. Для запуска инференса в предоставленном ноутбуке авторы рекомендуют GPU уровня Tesla T4 или выше. Модель распространяется по лицензии CreativeML OpenRAIL-M.

Сценарии применения

  • создание изображений волшебников и паладинов в 2D-стиле
  • генерация полнофигурных игровых персонажей на белом фоне
  • создание спрайтоподобных иллюстраций гуманоидных персонажей

Ограничения

Модель хуже генерирует неодушевлённые предметы, чем живых гуманоидных персонажей. Для инференса в указанном ноутбуке рекомендуется GPU уровня Tesla T4 или выше.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

2d-art-sprites Dreambooth model trained by ana-tamais with TheLastBen's fast-DreamBooth notebook

You can test this model using this Colab Notebook for Inference

Sample pictures of 2dart concept:

We saved the training data in dataset.zip, and some generated results in results.zip.

Some recommendations

We recommend to set the:

  • prompt as: "[some wizard, paladin, healer, etc.], in the style of 2dart, white background, no background, full body"
  • negative prompt as: "deformed, mutilated limbs, background, multiple people"
  • guidance scale between 9 and 10
  • sampling method as Euler
  • sampling steps as 60
  • batch size as 1 - avoid high batch size, unless you have a high memory GPU

This set of hyperparameters lead us to stable and good results.

This model was trained using images which the character has some human format or is a not deformed living being. So if you try to predict something like "sword, mirror, candle, etc" (non-living things), we saw the model doesn't perform so well.

You need at least a Tesla T4 to be able to run the inference step using the given notebook.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Ревизия весов
50ee145

0 моделей