Характеристики

Лицензия: OpenRAIL

Ссылки

mv-diffusion

Генерация изображений

Производная модели dylanebert/multi-view-diffusion. Порт MVDream для Diffusers, предназначенный для создания 3D-представлений по изображению.

3скачиваний за 30 дней0лайковвеса обновлены7 мая 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Карточка модели Marcelo-vta/mv-diffusion на Hugging Face совпадает с карточкой dylanebert/multi-view-diffusion, поэтому описание составлено по ней.

dylanebert/multi-view-diffusion — копия модели ashawkey/imagedream-ipmv-diffusers, размещённая для сохранения материалов курса ML for 3D. Это порт модели MVDream в библиотеку Diffusers для задачи image-to-3d: модель принимает изображение и предназначена для создания 3D-представления. Репозиторий содержит веса в формате safetensors и конфигурацию Diffusers. Лицензия — OpenRAIL. README не сообщает размер модели, поддерживаемые языки или подробности архитектуры.

Сценарии применения

создание 3D-представления объекта по изображению
преобразование изображения в 3D-контент для проектов компьютерной графики
эксперименты с генерацией 3D по изображению в Diffusers

Ограничения

README не описывает качество, требования к входным изображениям или ограничения реконструкции. Не следует использовать модель для намеренного создания оскорбительных или дискриминационных изображений.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

This is a copy of ashawkey/imagedream-ipmv-diffusers.

It is hosted here for persistence throughout the ML for 3D course.

MVDream-diffusers Model Card

This is a port of https://huggingface.co/Peng-Wang/ImageDream into diffusers.

For usage, please check: https://github.com/ashawkey/mvdream_diffusers

Citation

@article{wang2023imagedream,
  title={ImageDream: Image-Prompt Multi-view Diffusion for 3D Generation},
  author={Wang, Peng and Shi, Yichun},
  journal={arXiv preprint arXiv:2312.02201},
  year={2023}
}

Misuse, Malicious Use, and Out-of-Scope Use

The model should not be used to intentionally create or disseminate images that create hostile or alienating environments for people. This includes generating images that people would foreseeably find disturbing, distressing, or offensive; or content that propagates historical or current stereotypes.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

3D-генерация пока не поддерживается.

Ревизия весов: 3916e55