/ Модель

Характеристики

Размер весов
613 МБ
Лицензия
Apache 2.0
Базовая модель
FLUX.1-dev
Опубликована
15 ноя 2024

Flux-Animeo-v1-LoRA

Генерация изображенийТекст → изображение3 профессии

Flux-Animeo-v1-LoRA — LoRA-адаптер, разработанный strangerzonehf для базовой модели black-forest-labs/FLUX.1-dev.

1 270скачиваний за 30 дней23лайкавеса обновлены15 ноя 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель предназначена для генерации изображений в аниме- и мультяшной стилистике по текстовому описанию в сценариях text-to-image. Для активации адаптера в запросе необходимо использовать триггерное слово «Animeo». Примеры показывают генерацию персонажей с заданной внешностью, одеждой, позами, предметами и фоном.

Адаптер обучен на 50 изображениях высокого разрешения с использованием текстовых описаний на английском языке, подготовленных Florence2. Указаны параметры LoRA: Network Dim 64 и Network Alpha 32; обучение проводилось в течение 22 эпох, всего 4700 шагов с оптимизатором AdamW и постоянным планировщиком скорости обучения. Рекомендуемые размеры изображений — 768×1024, стандартный размер — 1024×1024. Модель работает через Diffusers поверх FLUX.1-dev и распространяется в формате Safetensors.

Сильная сторона модели — специализация на аниме-визуале и возможность применять характерный стиль поверх базовой FLUX.1-dev с помощью LoRA. Ограничения связаны с узкой областью обучения, небольшим объёмом обучающего набора и зависимостью от базовой модели; README не содержит сведений о количественных оценках качества, поддерживаемых языках запросов помимо английских обучающих описаний, требованиях к памяти или известных проблемах. Лицензия — Apache-2.0.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

strangerzonehf/Flux-Animeo-v1-LoRA

Model description

Image Processing Parameters

ParameterValueParameterValue
LR SchedulerconstantNoise Offset0.03
OptimizerAdamWMultires Noise Discount0.1
Network Dim64Multires Noise Iterations10
Network Alpha32Repeat & Steps35 & 4700
Epoch22Save Every N Epochs1
Labeling: florence2-en(natural language & English)

Total Images Used for Training : 50 [ 10@5 ] [ Hi -Res ]
 

Best Dimensions

  • 768 x 1024 (Best)
  • 1024 x 1024 (Default)

Setting Up

import torch
from pipelines import DiffusionPipeline

base_model = "black-forest-labs/FLUX.1-dev"
pipe = DiffusionPipeline.from_pretrained(base_model, torch_dtype=torch.bfloat16)

lora_repo = "strangerzonehf/Flux-Animeo-v1-LoRA"
trigger_word = "Animeo"  
pipe.load_lora_weights(lora_repo)

device = torch.device("cuda")
pipe.to(device)

Trigger words

You should use Animeo to trigger the image generation.

Download model

Weights for this model are available in Safetensors format.

Download them in the Files & versions tab.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

Базовая модель black-forest-labs/FLUX.1-dev закрыта автором (gated): у платформы нет доступа к её весам.

Ревизия весов
3a29bbd

0 моделей