/ Модель

Характеристики

Лицензия
Своя лицензия
Библиотека
diffusers
Опубликована
19 мая 2023

Realgar-v1

Генерация изображенийТекст → изображение3 профессии

Realgar-v1.0 — модель на базе Stable Diffusion для генерации изображений по коротким текстовым промптам, особенно в аниме-стиле.

52скачиваний за 30 дней13лайковвеса обновлены20 мая 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Изображения» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели сгенерируют результат по каждой задаче. Опубликованный тест появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Realgar-v1.0 — модель генерации изображений на основе Stable Diffusion, разработанная p1atdev и построенная на WD 1.5 beta 3. Она предназначена для создания изображений по текстовым описаниям; автор отмечает, что модель лучше работает с короткими промптами и стремится давать стабильный результат без добавления «masterpiece, best quality». В примере показана генерация изображения 512×768 с возможностью увеличения разрешения через highres fix.

Модель поддерживает аниме-эстетику, а с подходящими промптами может создавать и изображения в реалистичном стиле. Длинные промпты и некоторые специальные концепции могут отрабатываться хуже. Для снижения артефактов рекомендуется использовать негативный промпт; чтобы уменьшить вероятность изображений с наготой, автор советует добавить соответствующие негативные токены. Для работы рекомендуется VAE от WD 1.4. Репозиторий использует формат Diffusers, PyTorch и safetensors; лицензия указана как other, конкретные условия в предоставленных данных не раскрыты.

Сценарии применения

  • создание аниме-иллюстраций по текстовому описанию
  • генерация портретов персонажей и изображений в полный рост
  • создание фонов и сюжетных сцен по короткому промпту

Ограничения

Модель может хуже справляться с длинными промптами и некоторыми специальными концепциями; для уменьшения артефактов рекомендуется негативный промпт. Чтобы снизить вероятность NSFW-изображений, автор советует добавлять соответствующие негативные токены.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Realgar-v1.0

This model is a Stable Diffusion model based on WD 1.5 beta 3 base.

This model does not include the NovelAI Leak model.

WD 1.5 beta3 base をベースにしたモデルです。

NAI リークは含まれていません。

Prompting

This model aims for stability with short prompt. It may sometimes be difficult to generate with long prompt or special concepts. masterpiece, best quality is not needed.

However, as a minimum set of negative prompt, you can use worst quality, low quality, bad aesthetic, oldest, bad anatomy, blurry, or if you're unsure of good negative prompts, you can use the negative embedding ParaNegative.

To avoid NSFW outputs, it is recommended to include nsfw, nude and such in the negative prompt.

If you want to avoid real life style, use anime in positive prompt.

It is recommended to use highres fix if you can.

このモデルは短いプロンプトでの安定性を追求したモデルです。長いプロンプトや一部のコンセプトをただしく描けない可能性があります。masterpiece, best quality は不要です。

ただし、最低限のネガティブプロンプトが必要です。すくなくとも worst quality, low quality, bad aesthetic, oldest, bad anatomy, blurry があるとよいですが、良いネガティブプロンプトがわからない場合は補助的にネガティブTI ParaNegative を使うことが出来ます。(TI 単体での効果はあまり期待しないでください)

NSFW な出力を避けるために、 nsfw, nude などをネガティブプロンプトに入れることを推奨します。

写実的な画像の出力を避けたい場合は、anime をポジティブプロンプトにいれてください。

Highres fix を使うことを推奨します。

VAE

It is recommended to use the same VAE as WD 1.4, which can be found here https://huggingface.co/hakurei/waifu-diffusion-v1-4/blob/main/vae/kl-f8-anime2.ckpt

WD 1.4 の VAE が推奨です。

License

This model is released under the Fair AI Public License 1.0-SD (https://freedevproject.org/faipl-1.0-sd/). If any derivative of this model is made, please share your changes accordingly. Special thanks to ronsor/undeleted (https://undeleted.ronsor.com/) for help with the license.

このモデルは WD 1.5 と同じ Fair AI Public License 1.0-SD (https://freedevproject.org/faipl-1.0-sd/) の下配布されます。生成サービスなどでこのモデルまたは派生モデルを使う場合は、サービスの利用者にモデルを公開する必要があります。詳しい・正確なライセンスは 原文 を参照ください。

Examples

image-0

anime, cat ears, red hair, hoodie, hoodie, looking at viewer, lying on flower field, many many many flowers, grass
Negative prompt: nsfw, ParaNegative, worst quality, low quality, bad aesthetic, oldest, blurry,
Steps: 20, Sampler: Euler a, CFG scale: 7, Seed: 3482852439, Size: 512x768, Model hash: eb9ce3842e, Model: realgar-v1-fp16, Denoising strength: 0.7, Clip skip: 2, Version: v1.2.1, Hires upscale: 2, Hires steps: 15, Hires upscaler: Latent

image-1

anime, 1girl, flat chest, red hair, red hair ornament, parted bangs, bun, hair intakes, fascinator, hand up, v, one eye closed, grin, red clothes, frilled dress, bow, detached sleeves, gloves, looking at viewer, dynamic, cowboy shot, wind, sky
Negative prompt: nsfw, ParaNegative, worst quality, low quality, bad aesthetic, oldest, bad anatomy, blurry,
Steps: 20, Sampler: Euler a, CFG scale: 7, Seed: 232540561, Size: 512x768, Model hash: eb9ce3842e, Model: realgar-v1-fp16, Denoising strength: 0.65, Clip skip: 2, Version: v1.2.1, Hires upscale: 2, Hires steps: 15, Hires upscaler: Latent

image-2

anime, 1girl, long hair, from side, white hair, star, solo, starry sky, profile, dress, starry sky, sky, long sleeves, star hair ornament, hand up, blue eyes, arm up, standing, looking up, floating hair, white dress, capelet, wavy hair, wide sleeves, glowing, feet out of frame, night sky, hair ornament
Negative prompt: nsfw, ParaNegative, worst quality, low quality, bad aesthetic, oldest, blurry
Steps: 20, Sampler: Euler a, CFG scale: 7, Seed: 968862690, Size: 512x768, Model hash: eb9ce3842e, Model: realgar-v1-fp16, Denoising strength: 0.65, Clip skip: 2, Version: v1.2.1, Hires upscale: 2, Hires steps: 15, Hires upscaler: Latent

image-3

anime, 1girl, cat ears, blue hair, medium hair, parted bangs, white dress shirt, belt, skirt, barefoot, wariza, sitting, looking at viewer,
Negative prompt: nsfw, ParaNegative, worst quality, low quality, bad aesthetic, oldest, bad anatomy, blurry,
Steps: 20, Sampler: Euler a, CFG scale: 7, Seed: 2387123734, Size: 512x768, Model hash: eb9ce3842e, Model: realgar-v1-fp16, Denoising strength: 0.7, Clip skip: 2, Version: v1.2.1, Hires upscale: 2, Hires steps: 15, Hires upscaler: Latent

image-4

anime, 2girls wearing school uniform are at restaurant
Negative prompt: nsfw, worst quality, low quality, bad aesthetic, oldest, blurry,
Steps: 20, Sampler: Euler a, CFG scale: 7, Seed: 2425583782, Size: 768x512, Model hash: eb9ce3842e, Model: realgar-v1-fp16, Clip skip: 2, Version: v1.2.1

image-5

anime, watercolor of 1girl,
Negative prompt: nsfw, worst quality, low quality, bad aesthetic, oldest, blurry,
Steps: 20, Sampler: Euler a, CFG scale: 7, Seed: 3429871130, Size: 512x768, Model hash: eb9ce3842e, Model: realgar-v1-fp16, Clip skip: 2, Version: v1.2.1

🧨 Diffusers

open in colab

pip install diffusers transformers accelerate scipy safetensors
pip install xformers 
import torch
from diffusers import DiffusionPipeline, EulerAncestralDiscreteScheduler

model_id = "p1atdev/Realgar-v1"
pipe = DiffusionPipeline.from_pretrained(
    model_id,
    torch_dtype=torch.float16,
    custom_pipeline="lpw_stable_diffusion"
)
pipe.scheduler = EulerAncestralDiscreteScheduler.from_config(pipe.scheduler.config)

pipe = pipe.to("cuda")
pipe.enable_attention_slicing()
pipe.enable_xformers_memory_efficient_attention() # required

prompt = """
anime, 1girl, blue hair, cat ears, sweater vest,
"""
negative_prompt = "nsfw, nude, worst quality, low quality, bad aesthetic, oldest, bad anatomy"

width = 512
height = 768

image = pipe(
    prompt, 
    negative_prompt=negative_prompt,
    guidance_scale=7.0,
    num_inference_steps=20,
    width=width,
    height=height,
).images[0]

display(image) # for notebooks
# image.save("girl.png")

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · diffusers

Можно запустить

Подбираем GPU…

Ревизия весов
9e3464e

0 моделей