/ Модель

Характеристики

Лицензия
Apache 2.0
Опубликована
13 сен 2024

marigold-e2e-ft-normals

Генерация изображенийТекст → изображение3 профессии

Marigold E2E FT Normals оценивает карту нормалей поверхности по одному RGB-изображению для анализа сцен и 3D-реконструкции.

2 091скачиваний за 30 дней1лайквеса обновлены1 ноя 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Изображения» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели сгенерируют результат по каждой задаче. Опубликованный тест появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

GonzaloMartinGarcia выпустил Marigold E2E FT Normals — модель на базе диффузионной архитектуры Marigold для оценки карты нормалей поверхности по одному RGB-изображению. Она предназначена для монокулярного анализа сцен, включая изображения «из реального мира», и выполняет предсказание за один детерминированный шаг; для такого режима используются нулевой шум и размер ансамбля 1. Модель принимает изображение и выдаёт изображение-карту нормалей, пригодное для визуализации и задач 3D-реконструкции. Она дообучена сквозным образом на специализированной функции потерь; репозиторий распространяется по лицензии Apache-2.0.

Сценарии применения

  • оценка нормалей поверхности по фотографии
  • получение карты нормалей для 3D-реконструкции
  • анализ геометрии объектов на изображениях
  • предобработка изображений для графики и визуальных эффектов

Ограничения

Модель рассчитана на предсказание нормалей по одному изображению и не предназначена для генерации изображений по тексту. Для описанного детерминированного режима требуются нулевой шум и один шаг вывода.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Автор не опубликовал карточку модели.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Ревизия весов
70ec84f

0 моделей