/ Модель

Характеристики

Лицензия
Своя лицензия
Библиотека
diffusers
Опубликована
6 мар 2023

luna-diffusion

Генерация изображенийТекст → изображение3 профессии

Luna Diffusion — дообученная на Stable Diffusion 1.5 модель для генерации эфирных живописных изображений по текстовому описанию.

159скачиваний за 30 дней45лайковвеса обновлены11 мая 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Изображения» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели сгенерируют результат по каждой задаче. Опубликованный тест появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Luna Diffusion — дообученная автором proximasanfinetuning модель генерации изображений на базе Stable Diffusion 1.5. Она обучена на нескольких сотнях изображений высокого разрешения с преимущественно ручными подписями и настроена на создание эфирных, живописных изображений; отдельно отмечена работа с разными оттенками кожи.

Модель принимает текстовые запросы и генерирует изображения. Специальные триггерные слова не нужны: добавление слова «painting» усиливает живописный стиль, а «illustration» помогает получить более векторную иллюстрацию. Автор рекомендует разрешения 768×768, 512×768 или 768×512 пикселей; квадратный формат 512×512 может давать чрезмерно обработанный результат. Доступны файлы Diffusers, PyTorch и safetensors, а карточка показывает лицензию как «other» без уточнения условий.

Сценарии применения

  • создание живописных изображений по текстовому запросу
  • генерация стилизованных портретов с разными оттенками кожи
  • создание иллюстраций с более векторным видом
  • подготовка изображений в разрешениях около 768 пикселей

Ограничения

Модель лучше работает в рекомендованных автором разрешениях 768×768, 512×768 и 768×512; при 512×512 результат может выглядеть чрезмерно обработанным. В README отмечена склонность к изображению обнажённой натуры.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

→ about

  • this was finetuned on a few hundred & mostly hand-captioned highres images on SD 1.5 for ethereal, painterly vibes
  • no trigger words/ tokens, but you can add "painting" to the prompt to increase the painterly effect
  • use "illustration" in prompts to get more vector art looking images
  • works best at 768x768 px, 512x768 px or 768x512 px since it was finetuned on 768x768, so 512x512 will look overbaked
  • DPM++ 2M looks usually nice and crisp, use Euler_a for a more softer look
  • i recommend adding “nude, naked” to your negative prompt if you don’t like boobas because this model certainly does (¬‿¬ )
  • check my blog entry for more examples, comparisons and tips on settings

🧨 Diffusers

This model can be used just like any other Stable Diffusion model. For more information, please have a look at the Stable Diffusion Pipeline.

from diffusers import StableDiffusionPipeline
import torch

model_id = "proximasanfinetuning/luna-diffusion"
pipe = StableDiffusionPipeline.from_pretrained(model_id, torch_dtype=torch.float16)
pipe = pipe.to("cuda")

prompt = "painting of a beautiful woman with red hair, 8k, high quality"
image = pipe(prompt, height=768, width=768).images[0]

image.save("./result.jpg")

you can also get it as CKPT or Safetensors


→ some great images users on stablecog.com made with it:

Links: 1 2 3 4 5 6 7 8 9

or check the hashtag on twitter


→ finetuned to work well with specifying various skintones


if you enjoy this consider buying me a coffee or becoming a monthly supporter

(ノ◕ヮ◕)ノ*:・゚✧


license

This model is licensed under a modified CreativeML OpenRAIL-M license.

  • Utilizing and hosting the Luna Diffusion model and its derivatives on platforms that earn, will earn, or plan to earn revenue or donations requires prior authorization. To request permission, please email proximasan@protonmail.com.
  • You are permitted to host the model card and files on both commercial and non-commercial websites, apps, etc. as long as you properly credit the model by stating its full name and providing a link to the model card (https://huggingface.co/proximasanfinetuning/luna-diffusion), without performing any actual inference or finetuning.
  • The Luna Diffusion model and its derivatives can be hosted on non-commercial websites, apps, etc. as long as no revenue or donations are received. Proper credit must be given by stating the full model name and including a link to the model card (https://huggingface.co/proximasanfinetuning/luna-diffusion).
  • The outputs of the model or its derivatives can be used for commercial purposes as long as the usage is limited to teams of 10 or fewer individuals.
  • You can't use the model to deliberately produce nor share illegal or harmful outputs or content
  • The authors claims no rights on the outputs you generate, you are free to use them and are accountable for their use which must not go against the provisions set in the license
  • You may re-distribute the weights. If you do, please be aware you have to include the same use restrictions as the ones in the license and share a copy of the modified CreativeML OpenRAIL-M to all your users (please read the license entirely and carefully) Please read the full license here: https://huggingface.co/proximasanfinetuning/luna-diffusion/blob/main/luna_diffusion_license.txt

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · diffusers

Можно запустить

Подбираем GPU…

Ревизия весов
b119f82

0 моделей