This thesis enables feed-forward Gaussian splatting models to achieve geometrically accurate 3D representations of unbounded scenes. Our method performs on par with costly per-scene optimization and surpasses state-of-the-art depth estimation models.
Geometrically_Accurate_FeedForward_Gaussian_Splatting_for_Unbounded_Scenes
Модель преобразует изображения неограниченных сцен в геометрически точные 3D-представления методом feed-forward Gaussian Splatting.
Бенчмарки
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Публичные оценки
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
Это модель геометрически точного feed-forward Gaussian Splatting для построения трёхмерных представлений неограниченных сцен. Работа разработана César Díaz Blanco в рамках магистерской диссертации под руководством Zehao Yu и Haofei Xu.
Модель предназначена для преобразования изображений в 3D-представление сцены. По заявлению авторов, метод достигает качества, сопоставимого с ресурсоёмкой оптимизацией для каждой сцены, и превосходит современные модели оценки глубины. Репозиторий содержит веса в формате PyTorch; лицензия — MIT.
Сценарии применения
- построение 3D-представления сцены по изображениям
- восстановление геометрии неограниченных сцен
- оценка глубины сцен по изображениям
- создание Gaussian Splatting-представлений без оптимизации каждой сцены
Ограничения
Описание не приводит численных результатов, требований к входным данным или сведений о производительности; качество и применимость за пределами заявленных неограниченных сцен не установлены.
Карточка модели
README от автора на Hugging Face, как он его опубликовал
Как запустить
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
3D-генерация пока не поддерживается.
- Ревизия весов
- aec2070