LVSPM — набор PyTorch-чекпойнтов для синтеза новых ракурсов сцены и оценки позы камеры по изображениям.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
LVSPM — набор чекпойнтов для синтеза новых ракурсов и оценки позы камеры. В карточке указаны веса для разрешений 448 × 256 и 512 × 288; для сравнения с базовыми методами оценка позы проводится при 512 × 288, а синтез новых ракурсов — при 448 × 256. Модель предназначена для исследовательских экспериментов с реконструкцией сцены по изображениям и оценкой движения камеры. Для использования чекпойнты нужно поместить в каталог checkpoints репозитория LVSPM и следовать его инструкциям по установке, подготовке данных и запуску вывода.
Файлы предоставлены в формате PyTorch по лицензии MIT; дополнительные сведения об архитектуре и языковых возможностях в карточке не приведены.
Для запуска требуется репозиторий LVSPM и подготовленные данные; карточка не описывает архитектуру, обучающие данные и ограничения качества.
README от автора на Hugging Face, как он его опубликовал
Paper | Project Page | Code
Model checkpoints for novel view synthesis and camera pose estimation.
| Checkpoint | Resolution |
|---|---|
| LVSPM_448x256.ckpt | 448 × 256 |
| LVSPM_512x288.ckpt | 512 × 288 |
For comparison with baselines, pose is evaluated at 512 × 288 and novel view synthesis at 448 × 256.
Place the downloaded files in the LVSPM code repository's checkpoints/ directory. Follow its README for installation, inference, data preparation and evaluation.
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
3D-генерация пока не поддерживается.