/ Модель

Характеристики

Размер весов
613 МБ
Лицензия
CreativeML OpenRAIL-M
Базовая модель
FLUX.1-dev
Опубликована
29 ноя 2024

Flux-Lego-Ref-LoRA

Генерация изображенийТекст → изображение3 профессии

Flux-Lego-Ref-LoRA — адаптер LoRA, разработанный prithivMLmods для базовой модели black-forest-labs/FLUX.1-dev.

979скачиваний за 30 дней15лайковвеса обновлены29 ноя 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель предназначена для генерации изображений в стиле LEGO по текстовым описаниям, включая сцены с фигурками, роботами, астронавтами и другими игрушечными персонажами. Для активации требуется использовать триггерную фразу «lego --fref --89890». Модель ещё находится на этапе обучения и не является финальной версией, поэтому в отдельных случаях возможны артефакты и слабое качество результата.

Адаптер обучен на 15 изображениях с разметкой на английском языке, созданной с помощью Florence-2. Указаны параметры LoRA: Network Dim 64 и Network Alpha 32; обучение проводилось в течение 10 эпох, всего использовано 2350 шагов. Рекомендуемые размеры изображений — 1280×832 с соотношением сторон 3:2 и 1024×1024 как вариант по умолчанию; рекомендуемое число шагов генерации — 30–35. Модель работает с текстовой модальностью и рассчитана на применение через Diffusers совместно с FLUX.1-dev.

Сильной стороной адаптера является специализация на LEGO-стилизации и поддержка различных сюжетных сцен по текстовому запросу. Ограничения связаны с небольшим объёмом обучающих данных, незавершённым состоянием разработки и возможными артефактами. Лицензия — creativeml-openrail-m.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Flux-Lego-Ref-LoRA

The model is still in the training phase. This is not the final version and may contain artifacts and perform poorly in some cases.

Model description

prithivMLmods/Flux-Lego-Ref-LoRA

Image Processing Parameters

ParameterValueParameterValue
LR SchedulerconstantNoise Offset0.03
OptimizerAdamWMultires Noise Discount0.1
Network Dim64Multires Noise Iterations10
Network Alpha32Repeat & Steps17 & 2350
Epoch10Save Every N Epochs1
Labeling: florence2-en(natural language & English)

Total Images Used for Training : 15

Best Dimensions & Inference

DimensionsAspect RatioRecommendation
1280 x 8323:2Best
1024 x 10241:1Default

Inference Range

  • Recommended Inference Steps: 30–35

Setting Up

import torch
from pipelines import DiffusionPipeline

base_model = "black-forest-labs/FLUX.1-dev"
pipe = DiffusionPipeline.from_pretrained(base_model, torch_dtype=torch.bfloat16)

lora_repo = "prithivMLmods/Flux-Lego-Ref-LoRA"
trigger_word = "lego --fref --89890"  
pipe.load_lora_weights(lora_repo)

device = torch.device("cuda")
pipe.to(device)

Trigger words

You should use lego --fref --89890 to trigger the image generation.

Download model

Weights for this model are available in Safetensors format.

Download them in the Files & versions tab.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

Базовая модель black-forest-labs/FLUX.1-dev закрыта автором (gated): у платформы нет доступа к её весам.

Ревизия весов
c64ab7e

0 моделей