/ Модель

Характеристики

Размер весов
10,1 ГБ
Лицензия
Своя лицензия
Опубликована
19 фев 2025

stable-virtual-camera

Видео из изображенияИзображение, текст → видео3 профессии

Диффузионная Transformer-модель Stability AI для создания согласованных новых ракурсов сцены и плавных видеопоследовательностей по изображениям и целевым положениям камер.

8 537скачиваний за 30 дней241лайквеса обновлены3 июн 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Stable Virtual Camera — диффузионная модель Stability AI с архитектурой Transformer и 1,3 млрд параметров для синтеза новых ракурсов сцены. На вход подаются один или несколько снимков и целевые положения камер; модель генерирует последовательность согласованных видов, которую можно направлять по произвольной траектории камеры.

Модель предназначена для синтеза новых видов, творческих и дизайнерских инструментов, образовательных приложений и исследований реконструкции сцен. Она поддерживает значительные изменения ракурса и создаёт плавные во времени последовательности; заявлена генерация видео длительностью до 30 секунд с замыканием траектории в бесшовный цикл. В версии 1.1 исправлена проблема отделения объектов переднего плана от фона, отмечавшаяся в версии 1.0.

Модель не предназначена для создания фактически достоверных изображений людей или событий. В карточке указаны исследовательское и некоммерческое применение, а также соблюдение Acceptable Use Policy; лицензия в метаданных обозначена как other.

Сценарии применения

  • создание видео с движением камеры по заданной траектории на основе снимков сцены
  • синтез новых ракурсов для визуализации сцены
  • создание плавных зацикленных видеороликов из нескольких видов
  • подготовка визуальных материалов для дизайна и творческих проектов
  • исследование методов реконструкции и синтеза видов

Ограничения

Модель не обучена создавать фактически достоверные изображения людей или событий. Карточка ограничивает назначение исследовательскими и некоммерческими сценариями и требует соблюдения Acceptable Use Policy.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Stable Virtual Camera

Project Page

Stable Virtual Camera is a 1.3B generalist diffusion model for Novel View Synthesis (NVS), generating 3D consistent novel views of a scene, given any number of input views and target cameras. We encourage you to visit our website for more visualizations.

Updates

  • June 2025: Release v1.1 checkpoint fixing known issues of foreground objects sometimes being detached from the background in v1.0.

Model Description

  • Developed by: Stability AI
  • Model type: Transformer image-to-video model
  • Model details: This model was trained to generate 3D consistent novel views of a scene given any number of input views and target cameras. Users can specify the target camera trajectory freely, spanning across a large spatial range. Our model is capable of generating large viewpoint changes and temporally smooth samples. As a result, our samples maintain high consistency without requiring additional NeRF distillation, streamlining the view synthesis pipeline in the wild. Furthermore, we show that our method can generate high-quality videos lasting up to half a minute with seamless loop closure.

License

  • Non-Commercial License: Free for research and non-commercial use by organizations and individuals. Please refer to Stability AI's Non-Commercial License, available here, for more information.

Model Sources

Usage

For usage instructions, please refer to our GitHub repository.

Intended Uses

Intended uses include the following research and non-commercial uses:

  • Generation of artworks and use in design and other artistic processes.
  • Applications in educational or creative tools.
  • Research on reconstruction models, including understanding the limitations of these models.

All uses of the model should be in accordance with our Acceptable Use Policy.

Out-of-Scope Uses

The model was not trained to be factual or true representations of people or events. As such, using the model to generate such content is out-of-scope of the abilities of this model.

Contact

Please report any issues with the model or contact us:

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

Модели «картинка → видео» пока не запускаются.

Ревизия весов
e538e25

0 моделей