/ Модель

Характеристики

Лицензия
Своя лицензия
Базовая модель
animagine-xl-3.1
Опубликована
7 июн 2024

Rae-Diffusion-XL

Генерация изображенийТекст → изображение3 профессии

Дообученная на Animagine XL 3.1 модель SDXL для создания аниме-иллюстраций и изображений персонажей по текстовым запросам.

44скачиваний за 30 дней6лайковвеса обновлены10 июн 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Изображения» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели сгенерируют результат по каждой задаче. Опубликованный тест появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Rae Diffusion XL — модель генерации изображений по тексту, разработанная Raelina и дообученная на Animagine XL 3.1, основанной на Stable Diffusion XL. Она предназначена прежде всего для создания иллюстраций в стиле аниме, особенно изображений персонажей.

Для управления результатом можно использовать рекомендуемый порядок запроса с описанием персонажа и тегами качества, рейтинга, периода создания и эстетики. В README приведены рекомендуемые параметры генерации: CFG 7, 25–30 шагов и сэмплер Euler a. Модель доступна в форматах Diffusers и Safetensors.

README указывает лицензию Fair AI Public License 1.0-SD. Модель ориентирована на рисованную аниме-эстетику; качество результата зависит от формулировки запроса и настроек генерации.

Сценарии применения

  • создание иллюстраций персонажей в стиле аниме
  • генерация изображений по описанию персонажа и серии
  • подготовка концепт-арта для аниме-проектов

Ограничения

Модель специализирована на аниме-эстетике, поэтому может хуже подходить для других визуальных стилей. Результаты зависят от запроса и настроек генерации.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Overview

Introducing Rae Diffusion XL , an enhanced iteration based on the Animagine XL 3.1 model, specifically fine-tuned for generating stunning anime-style artwork. Building on the robust foundation of the SDXL model, Rae Diffusion XL is meticulously optimized to excel in depicting anime characters, pushing the boundaries of creativity.

Model Details

  • Developed by: Raelina
  • Model type: Diffusion-based text-to-image generative model
  • Model Description: Rae Diffusion XL is an enhanced iteration built on the Animagine XL 3.1 model. It is fine-tuned for high-quality anime-style character art generation.
  • License: Fair AI Public License 1.0-SD
  • Finetuned from: Animagine XL 3.1

Usage Guidelines

Tag Ordering

For optimal results, it's recommended to follow the structured prompt template because we train the model like this:

1girl/1boy, character name, from which series, everything else in any order.

Special Tag

Rae Diffusion XL inherits special tags from Animagine XL 3.1 to enhance image generation by steering results toward quality, rating, creation date, and aesthetic. While the model can generate images without these tags, using them helps achieve better results.

  • Quality tags: masterpiece, best quality, great quality, good quality, normal quality, low quality, worst quality
  • Rating tags: safe, sensitive, nsfw, explicit
  • Year tags: newest, recent, mid, early, oldest
  • Aesthetic tags: very aesthetic, aesthetic, displeasing, very displeasing

Recommended settings

  • Positive prompts:
masterpiece, best quality, ultra detailed, very aesthetic,
  • Negative prompts:
(low quality, worst quality:1.2), very displeasing, ugly, interlocked fingers, badly drawn, anatomically incorrect hands, signature, watermark,
  • CFG: 7
  • Sampling steps: 25 to 30
  • Sampler: Euler a
  • Supported Resolution:
1024 x 1024, 1152 x 896, 896 x 1152, 1216 x 832, 832 x 1216, 1344 x 768, 768 x 1344, 1536 x 640, 640 x 1536

Hires.fix Setting

Training config

  • Hardware: 1x RTX 3090 24gb
  • Batch size: 12
  • Gradient Accumulation: 1
  • Epochs: 15
  • Learning Rate: 5e-5
  • Optimizer: Adafactor
  • Optimizer Args: (Scale Parameter: False, Relative Step: False, Warmup Init: False)
  • Scheduler: Constant with warmup
  • Warmup steps: 0.05
  • Noise offset: 0.0357
  • Algorithm: Locon

License

Rae Diffusion XL now uses the Fair AI Public License 1.0-SD inherited from Animagine XL 3.1, compatible with Stable Diffusion models. Key points:

  1. Modification Sharing: If you modify Rae Diffusion XL, you must share both your changes and the original license.
  2. Source Code Accessibility: If your modified version is network-accessible, provide a way (like a download link) for others to get the source code. This applies to derived models too.
  3. Distribution Terms: Any distribution must be under this license or another with similar rules.
  4. Compliance: Non-compliance must be fixed within 30 days to avoid license termination, emphasizing transparency and adherence to open-source values.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Ревизия весов
9f3f454

0 моделей