/ Модель

Характеристики

Опубликована
9 апр 2026

Scal3R

Языковая модель

Scal3R реконструирует большие 3D-сцены по длинным видеопоследовательностям, сохраняя глобальный контекст между кадрами.

0скачиваний за 30 дней5лайковвеса обновлены11 апр 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Scal3R — система для реконструкции больших 3D-сцен по длинным видеопоследовательностям. Она использует нейронное представление глобального контекста, которое сжимает и сохраняет информацию о сцене на больших временных интервалах, чтобы улучшить точность и согласованность реконструкции. В README также описан запуск инференса на папке изображений.

Модель предназначена для реконструкции 3D-сцен по последовательностям кадров и рассчитана на обработку длинных видео с дальними связями между кадрами. Репозиторий содержит веса в формате PyTorch. Лицензия и численный размер модели в предоставленных данных не указаны.

Сценарии применения

  • реконструкция 3D-сцены по кадрам длинного видео
  • создание согласованной пространственной модели сцены по последовательности изображений
  • восстановление крупной сцены с учётом дальних связей между кадрами

Ограничения

Описание не приводит численных показателей качества, ограничений по длительности последовательности или условий лицензирования; запуск инференса требует получения чекпойнтов.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Scal3R: Scalable Test-Time Training for Large-Scale 3D Reconstruction

Scal3R is a framework for large-scale 3D scene reconstruction from long video sequences. It introduces a novel neural global context representation that efficiently compresses and retains long-range scene information, enabling the model to leverage extensive contextual cues for enhanced reconstruction accuracy and consistency.

[Paper] [Project Page] [GitHub]

Installation

Use the automated installation script provided in the repository:

bash scripts/install.sh

Download Checkpoints

Download the required checkpoints to data/checkpoints/:

mkdir -p data/checkpoints
hf download xbillowy/Scal3R scal3r.pt --repo-type model --local-dir data/checkpoints
curl -L https://github.com/serizba/salad/releases/download/v1.0.0/dino_salad.ckpt -o data/checkpoints/dino_salad.ckpt

Usage

Run inference on a folder of images:

python -m scal3r.run --input_dir /path/to/images

You can also set an explicit tag or output directory:

python -m scal3r.run \
  --input_dir /path/to/images \
  --tag demo \
  --output_dir data/result/custom/demo

For more details on arguments like --block_size and --overlap_size, please refer to the GitHub repository.

Citation

@misc{xie2026scal3rscalabletesttimetraining,
      title={Scal3R: Scalable Test-Time Training for Large-Scale 3D Reconstruction}, 
      author={Tao Xie and Peishan Yang and Yudong Jin and Yingfeng Cai and Wei Yin and Weiqiang Ren and Qian Zhang and Wei Hua and Sida Peng and Xiaoyang Guo and Xiaowei Zhou},
      year={2026},
      eprint={2604.08542},
      archivePrefix={arXiv},
      primaryClass={cs.CV},
      url={https://arxiv.org/abs/2604.08542}, 
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

3D-генерация пока не поддерживается.

Ревизия весов
72a3243

0 моделей