/ Модель

Характеристики

Лицензия
Своя лицензия
Библиотека
fast3r
Опубликована
26 фев 2025

Fast3R_ViT_Large_512

Языковая модель3 профессии

Fast3R ViT Large 512 восстанавливает 3D-сцену по изображениям и предназначена для интеграции в проекты на PyTorch.

1 131скачиваний за 30 дней28лайковвеса обновлены7 мар 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Fast3R ViT Large 512 — модель для восстановления 3D-сцены по изображениям, опубликованная под именем jedyang97. Карточка относит её к проекту Fast3R, посвящённому реконструкции 3D по более чем тысяче изображений за один прямой проход; модель можно использовать в проектах на PyTorch через класс Fast3R.

Модель предназначена для задачи image-to-3d. В названии указаны ViT Large и размер 512, однако README не уточняет значение 512 и конкретные выходные данные реконструкции. Репозиторий содержит веса в формате safetensors. Языковые возможности не заявлены. Лицензия обозначена как other, поэтому конкретные условия использования следует сверить с лицензией репозитория.

Сценарии применения

  • реконструкция 3D-сцены по набору изображений
  • создание 3D-реконструкции по большому набору фотографий
  • интеграция восстановления 3D по изображениям в приложение на PyTorch

Ограничения

README не уточняет точный формат и состав результатов реконструкции, требования к входным изображениям или значение числа 512 в названии. Лицензия указана как other, поэтому условия использования нужно проверить в репозитории.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

⚡️Fast3R - Towards 3D Reconstruction of 1000+ Images in One Forward Pass

CVPR 2025

Project Website Paper GitHub Repo Gradio Demo Hugging Face Model

Using Fast3R in Your Own Project

To use Fast3R in your own project, you can import the Fast3R class from fast3r.models.fast3r (follow instructions from the Fast3R GitHub repo to install) and use it as a regular PyTorch model.

from fast3r.models.fast3r import Fast3R
from fast3r.models.multiview_dust3r_module import MultiViewDUSt3RLitModule

# Load the model from Hugging Face
model = Fast3R.from_pretrained("jedyang97/Fast3R_ViT_Large_512")
model = model.to("cuda")

# [Optional] Create a lightweight lightning module wrapper for the model.
# This provides functions to estimate camera poses, evaluate 3D reconstruction, etc.
# See fast3r/viz/demo.py for an example.
lit_module = MultiViewDUSt3RLitModule.load_for_inference(model)

# Set model to evaluation mode
model.eval()
lit_module.eval()

Citation

@InProceedings{Yang_2025_Fast3R,
    title={Fast3R: Towards 3D Reconstruction of 1000+ Images in One Forward Pass},
    author={Jianing Yang and Alexander Sax and Kevin J. Liang and Mikael Henaff and Hao Tang and Ang Cao and Joyce Chai and Franziska Meier and Matt Feiszli},
    booktitle={Proceedings of the IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR)},
    month={June},
    year={2025},
}

License

The code and models are licensed under the FAIR NC Research License.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · fast3r

Нельзя запустить

3D-генерация пока не поддерживается.

Ревизия весов
a2c770b

0 моделей