/ Модель

Характеристики

Лицензия
Своя лицензия
Базовая модель
Illustrious-xl-early-release-v0
Опубликована
2 ноя 2024

irAsu-1.0

Генерация изображенийТекст → изображение3 профессии

irAsu v1.0 — дообученная на базе Illustrious XL модель для генерации иллюстраций по текстовым промптам с улучшенной анатомией, раскраской и фоном.

16скачиваний за 30 дней2лайкавеса обновлены2 ноя 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Изображения» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели сгенерируют результат по каждой задаче. Опубликованный тест появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

irAsu v1.0 — модель генерации изображений по текстовому описанию, созданная как второй этап дообучения Illustrious XL 0.1. Она предназначена для создания иллюстраций и улучшает раскраску, анатомию персонажей и фон по сравнению с базовой моделью. В основе лежит Stable Diffusion XL; модель использует текстовые промпты и ориентирована на английские теги и описания в стиле Danbooru.

Для работы автор рекомендует сэмплер Euler a, 25–30 шагов генерации, CFG 3,5–5 и параметр ENSD 31337; наиболее удачным назван режим около 28 шагов и CFG 4. В качестве основы промпта предлагаются описание персонажа и серии, а также теги качества. Лицензия в метаданных обозначена как other, поэтому конкретные условия использования следует проверять в карточке модели и у базовой модели.

Сценарии применения

  • генерация иллюстраций персонажей по текстовым промптам
  • создание изображений персонажей из аниме и игровых серий
  • генерация изображений с тегами Danbooru
  • улучшение анатомии и раскраски в иллюстрациях
  • создание фонов для иллюстративных сцен

Ограничения

Модель ориентирована на промпты с тегами в стиле Danbooru и рекомендуемые автором параметры генерации; конкретные условия лицензии other следует уточнять в карточке модели.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

irAsu is a second-stage finetune of Illustrious XL 0.1, which fixes the coloring, anatomy, and background of the images generated by the model.

Standard Prompting Guidelines

The model is finetuned from Illustrious XL v0.1, which is trained with danbooru tags. However, there is a little bit changes on dataset captioning, therefore there is some different default prompt used:

Default prompt:

1girl/1boy, character name, from what series, everything else in any order, best quality, amazing quality, very aesthetic.

Note: The quality tag masterpiece has been replaced with best quality due to reports that it often caused unwanted side effects.

Default negative prompt:

lowres, (bad), text, error, fewer, extra, missing, worst quality, jpeg artifacts, low quality, watermark, unfinished, displeasing, oldest, early, chromatic aberration, signature, extra digits, artistic error, username, scan, [abstract],

Default configuration:

Default configuration: Euler a with around 25-30 steps, CFG 3.5-5, and ENSD set to 31337. Sweet spot is around 28 steps and CFG 4.

Training Configurations

Pretraining: N/A

Finetuning:

  • Dataset size: 3,140 images

  • GPU: 1xA100

  • Optimizer: AdaFactor

  • Unet Learning Rate: 3e-6

  • Text Encoder Learning Rate: - (Train TE set to False)

  • Batch Size: 16

  • Gradient Accumulation: 3

  • Warmup steps: 5%

  • Min SNR Gamma: 5

  • Epoch: 10 (epoch 9 is used)

  • Noise Offset: 0.0357

  • Random Cropping: True

  • Loss: Huber

  • Huber Schedule: SNR

  • Huber C: 0.1

License

irAsu v1.0 falls under the Fair AI Public License 1.0-SD license.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Ревизия весов
251dcf7

0 моделей