Характеристики

Лицензия: Своя лицензия
Базовая модель: sapiens2-pose-0.4b
Опубликована: 6 окт 2026

Ссылки

iron-sapiens2-pose-0.4b-npu2

Классификация и разметка

Экспорт Sapiens2-Pose 0.4B для NPU AMD Ryzen AI второго поколения, определяющий 308 ключевых точек человека по изображению и рамке его обнаружения.

0скачиваний за 30 дней0лайковвеса обновлены6 окт 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель brishen/iron-sapiens2-pose-0.4b-npu2 — экспорт Sapiens2-Pose 0.4B проекта IRON для запуска на NPU AMD Ryzen AI второго поколения. Она принимает изображение и рамку человека в формате COCO, после чего возвращает координаты и оценки 308 ключевых точек тела, стоп, кистей и лица в координатах изображения. Для запуска используется Rust-runtime taconite-sapiens2 с скомпилированными ядрами и упакованными весами; поддерживаются NPU2 на Strix Point, Strix Halo и Krackan. На NPU1 модель не загружается.

README сообщает о сравнении с исходной моделью float32: косинусное сходство heatmap составляет 0,9993–0,9996, средняя ошибка координат ключевых точек — 0,12–1,03 пикселя на пяти примерах из COCO val2017; обработка одной рамки занимает около 4,3 секунды на Ryzen AI 9 HX 370. Веса Meta распространяются по лицензии Sapiens2; она допускает перераспространение с приложенной лицензией, но запрещает, среди прочего, наблюдение и биометрическую обработку.

Сценарии применения

оценка позы человека на изображении
определение положения тела и конечностей
оценка ключевых точек лица и кистей
анализ позы людей в фотографиях и видеокадрах после обнаружения человека

Ограничения

Работает только на NPU2 (AIE2P) для Strix Point, Strix Halo и Krackan, не поддерживает NPU1. Требуется рамка человека от отдельного детектора; лицензия запрещает, среди прочего, использование для наблюдения и биометрической обработки.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Sapiens2-Pose 0.4B whole-body keypoints (308) on the AMD NPU

An IRON export of facebook/sapiens2-pose-0.4b for AMD Ryzen AI NPUs: the compiled NPU kernels (.xclbin + instruction streams) and the packed weights the taconite-sapiens2 Rust runtime replays, over XRT or directly over the amdxdna driver.

The kernels are compiled for NPU2 (AIE2P: Strix Point, Strix Halo, Krackan) and will not load on NPU1 (Phoenix, Hawk Point).

Download

hf download brishen/iron-sapiens2-pose-0.4b-npu2 --local-dir sapiens2-pose
# or, from an IRON checkout:
python scripts/hf_models.py download sapiens2-pose --repo brishen/iron-sapiens2-pose-0.4b-npu2 --out sapiens2-pose

Top-down: give each person's box (COCO x,y,w,h, from a person detector); the keypoints come back in image coordinates with their heatmap scores (Sociopticon's 308: body + feet, hands, face). sapiens2 check on a Ryzen AI 9 HX 370, against the float32 HF model: heatmaps cosine 0.9993-0.9996, mean keypoint error 0.12-1.03 px over 5 COCO val2017 boxes; ~4.3 s a box.

The weights are Meta's, under the Sapiens2 License (LICENSE.md here): it permits redistribution with the license attached and forbids, among others, surveillance and biometric processing.

Usage

cargo install taconite-sapiens2             # over XRT
# or, with no XRT at all (straight to the amdxdna driver):
cargo install taconite-sapiens2 --no-default-features --features cli,direct
sapiens2 pose sapiens2-pose person.jpg --box 150,130,275,480 -o overlay.png --json kp.json
sapiens2 check sapiens2-pose                    # the reference cases against the float32 model

See taconite-sapiens2 (docs, source) for the full API. The bundle is exported by IRON's iron/applications/sapiens2_pose.

Provenance

Upstream model: facebook/sapiens2-pose-0.4b (license: other; its terms apply to these weights)
IRON commit: 08a5e90
Uploaded: 2026-10-06
Files: 23, 732.9 MB

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

В репозитории нет config.json: не понять архитектуру модели.

Ревизия весов: 4f52272