/ Модель

Характеристики

Лицензия
OpenRAIL++
Опубликована
28 ноя 2022

robo-diffusion-2-base

Генерация изображенийТекст → изображение3 профессии

Дообученная на базе Stable Diffusion 1.4 модель для генерации стилизованных изображений роботов по текстовым запросам.

230скачиваний за 30 дней186лайковвеса обновлены23 мар 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Изображения» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели сгенерируют результат по каждой задаче. Опубликованный тест появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Robo-Diffusion 2 (base) — модель генерации изображений по текстовому описанию, созданная методом DreamBooth путем дообучения Stable Diffusion 1.4. Она предназначена для создания изображений роботов в характерном стиле модели; для его активации автор рекомендует помещать слова «nousr robot» ближе к началу запроса и использовать негативные промпты для настройки результата. Репозиторий содержит веса в форматах Diffusers и PyTorch и рассчитан на работу с StableDiffusionPipeline.

Модель принимает текстовые запросы на английском языке и генерирует изображения. Распространяется по лицензии OpenRAIL++.

Сценарии применения

  • создание изображений роботов по текстовому описанию
  • генерация иллюстраций роботов в стиле Robo-Diffusion
  • подготовка концепт-артов роботов
  • создание AI-арта с роботами

Ограничения

Для вызова дообученного стиля рекомендуется ставить «nousr robot» в начале промпта; автор также рекомендует использовать негативные промпты. Модель специализирована на изображениях роботов.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Robo-Diffusion 2 (base)

A dreambooth-method finetune of stable diffusion that will output cool looking robots when prompted.

Usage

Keep the words nousr robot towards the beginning of your prompt to invoke the finetuned style. Use negative prompts to achieve the best result.

import torch
from diffusers import StableDiffusionPipeline, EulerDiscreteScheduler

scheduler = EulerDiscreteScheduler.from_pretrained("nousr/robo-diffusion-2-base", subfolder="scheduler")
pipe = StableDiffusionPipeline.from_pretrained("nousr/robo-diffusion-2-base", scheduler=scheduler, torch_dtype=torch.float16)
pipe = pipe.to("cuda")

prompt = "A realistic photograph of a 3d nousr robot in a modern city. A glossy white and orange nousr robot."
negative_prompt = "black and white robot, picture frame, a children's drawing in crayon. #Wholesale, Abstract Metal Sculpture. i'm leaving a bad review."
image = pipe(prompt, negative_prompt=negative_prompt, num_inference_steps=32, guidance_scale=5.0).images[0]

image.save("robo.png")

Original Model

Based on stable diffusion 1.4 can be found here

Socials

Use the #robodiffusion so i can see the cool stuff you make!

If you enjoy the model i'd appreciate a follow on twitter

If you are feeling especially generous, you can sponsor me on github


*NOTE: ensure you have read the license and agree to the terms

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Ревизия весов
5ecf5c9

0 моделей