/ Модель

Характеристики

Параметры
1,5 млрд
Размер весов
3,3 ГБ
Лицензия
Своя лицензия
Архитектура
sapiens2 · dense
Базовая модель
sapiens2-pointmap-1b
Библиотека
mlx
Опубликована
13 сен 2026

sapiens2-pointmap-1b-bf16

Оценка глубиныИзображение → depth_map3 профессии

MLX-версия Meta Sapiens2, которая строит попиксельную карту 3D-координат XYZ человека по изображению.

45скачиваний за 30 дней0лайковвеса обновлены13 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Это конвертированная в формат MLX модель Meta Sapiens2 для оценки pointmap по изображению: она предсказывает для каждого пикселя координаты XYZ в 3D и масштаб. Репозиторий содержит вариант исходной модели facebook/sapiens2-pointmap-1b с весами bfloat16; параметры q/k/v объединены в тензоры wqkv. Веса сохранены в safetensors, размер модели по метаданным — 1,5 млрд параметров.

Модель предназначена для плотной оценки 3D-координат людей на изображениях и рассчитана на запуск через mlx-vlm на совместимой платформе MLX. В README указано, что выходные массивы имеют разрешение входного изображения. Карточка этой конверсии отсылает к исходной модели за описанием её назначения и лицензии; метаданные указывают лицензию other. Точные условия лицензии следует сверить с карточкой исходной модели.

Сценарии применения

  • получение попиксельной 3D-карты человека на фотографии
  • оценка пространственного расположения человека в кадре
  • подготовка плотных 3D-данных для анализа позы и формы человека

Ограничения

Модель ориентирована на изображения людей и требует среды MLX с mlx-vlm. Условия лицензии и подробные ограничения применения следует проверить в карточке исходной модели Meta.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

mlx-community/sapiens2-pointmap-1b-bf16

bf16 MLX conversion of facebook/sapiens2-pointmap-1b (Meta's Sapiens2, ICLR 2026): per-pixel XYZ pointmaps + scale. Converted with mlx-vlm 0.7.0; the original float32 checkpoint is 2x this size.

What is in model.safetensors (3.26 GB):

  • every parameter in bfloat16 (the reference runs inference in bf16 mixed precision);
  • the q/k/v projections merged into one wqkv tensor per block, as the mlx-vlm Sapiens2 model expects.

Refer to the original model card for the model description, intended use and license.

Use with mlx-vlm

pip install -U mlx-vlm
from mlx_vlm import load
from mlx_vlm.models.sapiens2.generate import Sapiens2Predictor, read_image

model, _ = load("mlx-community/sapiens2-pointmap-1b-bf16")
predictor = Sapiens2Predictor(model)
output = predictor.infer(read_image("image.jpg"))
pointmaps, scale = output["pointmaps"], output["scales"]  # (H, W, 3), (1,)

Outputs are numpy arrays at the input resolution (dense tasks) or in source-image pixel coordinates (pose). See the mlx-vlm Sapiens2 README for preprocessing details and the per-task output keys.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · mlx

Нельзя запустить

MLX-модели работают только на Apple Silicon.

Класс архитектуры
Sapiens2ForPointmapEstimation
Ревизия весов
412e65e

0 моделей