/ Модель

Характеристики

Библиотека
diffusers
Опубликована
1 ноя 2025

GSFixer

Видео из изображенияИзображение, текст → видео3 профессии

GSFixer восстанавливает видео с новыми ракурсами 3D-сцен, улучшая кадры, отрендеренные из низкокачественных реконструкций 3D Gaussian Splatting.

8 254скачиваний за 30 дней1лайквеса обновлены24 дек 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

GSFixer — модель для восстановления видео, разработанная для устранения артефактов в новых ракурсах, полученных при рендеринге сцен методом 3D Gaussian Splatting (3DGS). Она использует признаки изображений DINOv2 и геометрические признаки VGGT из эталонных ракурсов, чтобы улучшать семантическую согласованность и пространственную целостность восстановленных кадров.

Модель предназначена для обработки видео, созданного из низкокачественных реконструкций 3D-сцен по разреженным наблюдениям. В метаданных Hugging Face указана задача image-to-video; репозиторий использует Diffusers и содержит веса в формате safetensors.

Описание не сообщает размер модели, поддерживаемые языки, лицензию и количественные показатели качества. Поэтому условия использования и пригодность для конкретных сцен следует сверять с дополнительной документацией и оценивать на собственных данных.

Сценарии применения

  • устранение артефактов в ракурсах, отрендеренных из 3D Gaussian Splatting
  • восстановление видео новых ракурсов по эталонным изображениям
  • повышение согласованности кадров в реконструкциях 3D-сцен по разреженным ракурсам

Ограничения

Карточка не приводит количественных оценок качества, размера модели или лицензии. Метод рассчитан на исправление новых ракурсов, полученных из низкокачественных реконструкций 3DGS, и использует эталонные ракурсы.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

GSFixer: Improving 3D Gaussian Splatting with Reference-Guided Video Diffusion Priors

GSFixer is a framework designed to improve the quality of 3D Gaussian Splatting (3DGS) representations reconstructed from sparse inputs. It leverages a reference-guided video restoration model built upon a DiT-based video diffusion model (CogVideoX).

Introduction

Reconstructing 3D scenes using 3D Gaussian Splatting (3DGS) from sparse views often results in noticeable artifacts due to insufficient information. GSFixer addresses this challenge by using a reference-guided video restoration approach. By integrating both 2D semantic features (from DINOv2) and 3D geometric features (from VGGT) of reference views, the model enhances semantic coherence and 3D consistency when fixing novel views rendered from low-quality 3DGS.

Citation

If you find this work useful, please consider citing:

@article{yin2025gsfixer,
  title={GSFixer: Improving 3D Gaussian Splatting with Reference-Guided Video Diffusion Priors},
  author={Yin, Xingyilang and Zhang, Qi and Chang, Jiahao and Feng, Ying and Fan, Qingnan and Yang, Xi and Pun, Chi-Man and Zhang, Huaqi and Cun, Xiaodong},
  journal={arXiv preprint arXiv:2508.09667},
  year={2025}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · diffusers

Нельзя запустить

Модели «картинка → видео» пока не запускаются.

Ревизия весов
253dc3b

0 моделей