/ Модель

Характеристики

Лицензия
Своя лицензия
Опубликована
29 июн 2026

globalsplat

Языковая модель

GlobalSplat — модель для построения обобщаемого 3D-представления сцен и синтеза новых ракурсов методом 3D Gaussian Splatting.

0скачиваний за 30 дней0лайковвеса обновлены30 июн 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

GlobalSplat — набор предварительно обученных весов для обобщаемого синтеза новых ракурсов с помощью 3D Gaussian Splatting. Модель разработана авторами проекта GlobalSplat и обучена на RealEstate10K; опубликованы варианты с 2 000 и 16 000 гауссиан, включая вариант 16K без регуляризатора прозрачности. Это feed-forward модель, использующая глобальные токены сцены для представления сцены и последующего декодирования.

Модель предназначена для получения 3D-представления сцены по изображениям и рендеринга новых видов. В README приведены результаты оценки на RealEstate10K при 24 входных ракурсах: для варианта 16K указаны PSNR 28,53, SSIM 0,883 и LPIPS 0,140, а для версии без регуляризатора прозрачности — PSNR 28,95, SSIM 0,891 и LPIPS 0,124. Доступны только веса checkpoint; для запуска требуется код GlobalSplat и соответствующая конфигурация. Лицензия указана как other, конкретные условия в предоставленных данных не раскрыты.

Сценарии применения

  • восстановление 3D-сцены по нескольким изображениям
  • рендеринг новых ракурсов сцены
  • синтез видов интерьеров и недвижимости по данным RealEstate10K

Ограничения

Опубликованные веса обучены на RealEstate10K, поэтому их применимость к существенно отличающимся сценам не подтверждена приведёнными данными. Для использования нужны код GlobalSplat и совместимая конфигурация; условия лицензии other требуют отдельной проверки.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

GlobalSplat — pretrained weights

Feed-forward, generalizable 3D Gaussian Splatting via global scene tokens (align first, decode later). These are the released RealEstate10K checkpoints for the GlobalSplat paper.

Checkpoints

FileVariant#GaussiansRE10K 24-view PSNR / SSIM / LPIPS
globalsplat-re10k-2k.ckpt2K (M_max=2)2K26.84 / 0.838 / 0.199
globalsplat-re10k-16k.ckpt16K (paper default)16K28.53 / 0.883 / 0.140
globalsplat-re10k-16k-noopacity.ckpt16K (current code, no opacity loss)16K28.95 / 0.891 / 0.124
globalsplat-re10k-32k.ckpt32K32K29.48 / 0.901 / 0.123

The -noopacity 16K (trained with the released code, decoder opacity regularizer disabled) outperforms the paper default at every context count: 12v 29.10 / 24v 28.95 / 36v 28.76 PSNR.

All files are weights-only checkpoints (state_dict + Lightning version; the frozen VGG perceptual net and optimizer state are stripped).

Usage

With the GlobalSplat code:

# 16K paper default
python -m globalsplat.main +experiment=re10k_16k dataset=re10k_eval_ctx24 \
    mode=test checkpointing.load=globalsplat-re10k-16k.ckpt
# 2K (sets M_max=2) and 32K
python -m globalsplat.main +experiment=re10k_2k  ... checkpointing.load=globalsplat-re10k-2k.ckpt
python -m globalsplat.main +experiment=re10k_32k ... checkpointing.load=globalsplat-re10k-32k.ckpt

License

PolyForm Noncommercial 1.0.0 with additional terms (see LICENSE and ADDITIONAL_TERMS.md): noncommercial research / academic / personal use only; commercial use requires a separate written license; military and surveillance use are prohibited. Source-available, not an OSI open-source license.

Citation

@article{itkin2026globalsplat,
  title={GlobalSplat: Efficient Feed-Forward 3D Gaussian Splatting via Global Scene Tokens},
  author={Itkin, Roni and Issachar, Noam and Keypur, Yehonatan and Chen, Xingyu and Chen, Anpei and Benaim, Sagie},
  journal={arXiv preprint arXiv:2604.15284},
  year={2026}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

3D-генерация пока не поддерживается.

Ревизия весов
18a3f65

0 моделей