/ Модель

Характеристики

Параметры
403 млн
Размер весов
907 МБ
Лицензия
Своя лицензия
Архитектура
sapiens2 · dense
Базовая модель
sapiens2-normal-0.4b
Библиотека
mlx
Опубликована
13 сен 2026

sapiens2-normal-0.4b-bf16

Оценка глубиныИзображение → depth_map3 профессии

MLX-конверсия модели Meta Sapiens2 для оценки нормалей поверхности по пикселям на изображениях с людьми.

50скачиваний за 30 дней0лайковвеса обновлены13 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

mlx-community публикует конверсию в формате MLX модели facebook/sapiens2-normal-0.4b, разработанной Meta и основанной на семействе Sapiens2. Она предназначена для оценки нормалей поверхности по каждому пикселю на изображениях с людьми. Модель содержит около 402,7 млн параметров; веса сохранены в bfloat16 в файле safetensors, а проекции q/k/v объединены в тензор wqkv для ожидаемой MLX архитектуры Sapiens2.

Модель принимает изображение и выдаёт плотную карту нормалей поверхности с разрешением входного изображения. Репозиторий рассчитан на запуск через mlx-vlm. В метаданных указана лицензия other; README отсылает к исходной карточке модели за условиями лицензии, поэтому конкретные условия использования здесь не уточнены.

Сценарии применения

  • Построение карты нормалей человека на фотографии
  • Оценка ориентации поверхности тела по пикселям
  • Подготовка изображений людей для 3D-реконструкции
  • Анализ геометрии человека в системах компьютерного зрения

Ограничения

Модель ориентирована на изображения с людьми и выдаёт оценку нормалей, а не глубину сцены, несмотря на pipeline-тег depth-estimation. Для точных условий лицензии следует обратиться к карточке исходной модели.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

mlx-community/sapiens2-normal-0.4b-bf16

bf16 MLX conversion of facebook/sapiens2-normal-0.4b (Meta's Sapiens2, ICLR 2026): per-pixel surface normals. Converted with mlx-vlm 0.7.0; the original float32 checkpoint is 2x this size.

What is in model.safetensors (0.91 GB):

  • every parameter in bfloat16 (the reference runs inference in bf16 mixed precision);
  • the q/k/v projections merged into one wqkv tensor per block, as the mlx-vlm Sapiens2 model expects.

Refer to the original model card for the model description, intended use and license.

Use with mlx-vlm

pip install -U mlx-vlm
from mlx_vlm import load
from mlx_vlm.models.sapiens2.generate import Sapiens2Predictor, read_image

model, _ = load("mlx-community/sapiens2-normal-0.4b-bf16")
predictor = Sapiens2Predictor(model)
normals = predictor.infer(read_image("image.jpg"))["normals"]  # (H, W, 3), unit length

Outputs are numpy arrays at the input resolution (dense tasks) or in source-image pixel coordinates (pose). See the mlx-vlm Sapiens2 README for preprocessing details and the per-task output keys.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · mlx

Нельзя запустить

MLX-модели работают только на Apple Silicon.

Класс архитектуры
Sapiens2ForNormalEstimation
Ревизия весов
fbb5d33

0 моделей