/ Модель

Характеристики

Размер весов
20,8 ГБ
Лицензия
Apache 2.0
Библиотека
diffusion-single-file
Опубликована
29 ноя 2024

mv-adapter

Генерация изображенийТекст → изображение3 профессии

Адаптер для генерации согласованных изображений объекта с нескольких ракурсов по тексту, исходному изображению или геометрическим условиям.

32 753скачиваний за 30 дней65лайковвеса обновлены13 июн 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

MV-Adapter — набор адаптеров, разработанный авторами проекта MV-Adapter, который расширяет модели генерации изображений по тексту, включая Stable Diffusion 2.1 и SDXL, генерацией согласованных изображений с нескольких ракурсов. Он предназначен для создания многоракурсных изображений объектов по текстовому описанию или исходному изображению, а также для генерации текстур с геометрическими условиями.

Модель поддерживает изображения размером 768×768, произвольный выбор ракурсов и совместную работу с персонализированными моделями, LCM и ControlNet. Полученные виды можно использовать для последующей реконструкции 3D-объекта. Весовые файлы представлены в формате safetensors; для использования требуется соответствующая базовая модель и код проекта. Лицензия — Apache-2.0.

Сценарии применения

  • создание многоракурсного изображения объекта по текстовому описанию
  • получение нескольких ракурсов объекта по исходной картинке
  • подготовка видов объекта для последующей 3D-реконструкции
  • генерация текстур для 3D-объекта с геометрическими условиями
  • создание многоракурсных изображений с персонализированной Stable Diffusion

Ограничения

Для работы требуется совместимая базовая модель и код проекта; качество и совместимость зависят от выбранной базовой модели и условий генерации. README описывает разрешение 768×768, но не приводит оценок качества или подробных требований к ресурсам.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

MV-Adapter Model Card

Project Page | Paper (ArXiv) | Paper (HF) | Code | Gradio demo

Create High-fidelity Multi-view Images with Various Base T2I Models and Various Conditions.

Introduction

MV-Adapter is a creative productivity tool that seamlessly transfer text-to-image models to multi-view generators.

Highlights:

  • 768x768 multi-view images
  • work well with personalized models (e.g. DreamShaper, Animagine), LCM, ControlNet
  • support text or image to multi-view (reconstruct 3D thereafter), or with geometry guidance for 3D texture generation
  • arbitrary view generation

Examples

Model Details

ModelBase ModelHF WeightsDemo Link
Text-to-MultiviewSD2.1mvadapter_t2mv_sd21.safetensors
Text-to-MultiviewSDXLmvadapter_t2mv_sdxl.safetensorsGeneral / Anime
Image-to-MultiviewSD2.1mvadapter_i2mv_sd21.safetensors
Image-to-MultiviewSDXLmvadapter_i2mv_sdxl.safetensorsDemo
Text-Geometry-to-MultiviewSDXLmvadapter_tg2mv_sdxl.safetensors
Image-Geometry-to-MultiviewSDXLmvadapter_ig2mv_sdxl.safetensors
Image-to-Arbitrary-ViewsSDXL

Usage

Refer to our Github repository.

Citation

If you find this work helpful, please consider citing our paper:

@article{huang2024mvadapter,
  title={MV-Adapter: Multi-view Consistent Image Generation Made Easy},
  author={Huang, Zehuan and Guo, Yuanchen and Wang, Haoran and Yi, Ran and Ma, Lizhuang and Cao, Yan-Pei and Sheng, Lu},
  journal={arXiv preprint arXiv:2412.03632},
  year={2024}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · diffusion-single-file

Нельзя запустить

Генеративная модель выложена не в формате diffusers.

Ревизия весов
6de4033

0 моделей