/ Модель

Характеристики

Размер весов
1,5 ГБ
Лицензия
Своя лицензия
Опубликована
16 авг 2024

flux-controlnet-canny-v3

Генерация изображенийТекст → изображение3 профессии

XLabs-AI/flux-controlnet-canny-v3 — контрольная модель ControlNet для генеративной модели FLUX.1-dev, разработанной Black Forest Labs.

2 448скачиваний за 30 дней133лайкавеса обновлены16 авг 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Изображения» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели сгенерируют результат по каждой задаче. Опубликованный тест появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Она предназначена для генерации изображений по текстовому описанию с управлением композицией и структурой изображения на основе Canny-границ, извлечённых из входного изображения.

Модель обучена для разрешения 1024×1024 и рассчитана на работу с FLUX.1-dev. Выпущенная версия v3 заявлена как улучшенная и обеспечивающая более реалистичные результаты. Модель можно использовать через ComfyUI с соответствующими пользовательскими узлами и готовыми workflow либо через инструменты и скрипты из официальных репозиториев XLabs-AI. README не содержит сведений о размере параметров, точной архитектуре базовой модели, поддерживаемых языках запросов или других модальностях.

Основное преимущество модели — возможность лучше сохранять контуры и композицию исходного изображения при генерации в FLUX.1-dev. Ограничения включают зависимость от базовой модели FLUX.1-dev, ориентацию на разрешение 1024×1024 и необходимость совместимой инфраструктуры для запуска. Веса распространяются по лицензии FLUX.1-dev Non-Commercial License, поэтому коммерческое использование не разрешено условиями указанной лицензии.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Controlnet collections for Flux

This repository provides a Canny ControlNet checkpoint for FLUX.1-dev model by Black Forest Labs

Example Picture 1

See our github for comfy ui workflows. Example Picture 1

See our github for train script, train configs and demo script for inference.

Models

ControlNet is trained on 1024x1024 resolution and works for 1024x1024 resolution. We release v3 version - better and realistic version, which can be used directly in ComfyUI!

Please, see our ComfyUI custom nodes installation guide

Examples

See examples of our models results below.
Also, some generation results with input images are provided in "Files and versions"

Inference

To try our models, you have 2 options:

  1. Use main.py from our official repo
  2. Use our custom nodes for ComfyUI and test it with provided workflows (check out folder /workflows)

Please, try our workflow "canny_workflow.json"

Example Picture 1 Example Picture 1

License

Our weights fall under the FLUX.1 [dev] Non-Commercial License

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Ревизия весов
89efcb0

0 моделей