/ Модель
Каталог

Характеристики

Лицензия
MIT
Базовая модель
CLIP-ViT-H-14-laion2B-s32B-b79K
Опубликована
23 сен 2026

Ссылки

Hugging Face

iron-clip-vit-h14-npu2

brishen
Классификация изображений без дообученияИзображение, текст → label

Экспорт CLIP ViT-H/14 для NPU AMD Ryzen AI, сопоставляющий изображения с текстовыми метками для классификации без дообучения.

0скачиваний за 30 дней0лайковвеса обновлены23 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Это экспорт CLIP ViT-H/14, подготовленный проектом IRON для запуска на NPU AMD Ryzen AI второго поколения. Модель основана на laion/CLIP-ViT-H-14-laion2B-s32B-b79K и сопоставляет изображения с текстовыми описаниями, позволяя классифицировать изображения по меткам, заданным текстом, без дообучения под каждый набор классов. Репозиторий содержит скомпилированные ядра NPU и упакованные веса для выполнения через Rust runtime taconite-clip, используя XRT или драйвер amdxdna.

Экспорт рассчитан на NPU2 с архитектурой AIE2P в устройствах Strix Point, Strix Halo и Krackan; на NPU1, включая Phoenix и Hawk Point, эти ядра не загружаются. Лицензия — MIT, как у исходных весов.

Сценарии применения

  • классификация изображений по пользовательским текстовым меткам
  • поиск изображений по текстовому описанию
  • сопоставление изображения с набором вариантов ответа
  • запуск zero-shot классификации на поддерживаемых NPU AMD Ryzen AI

Ограничения

Скомпилированные ядра рассчитаны только на NPU2 (AIE2P) и не загружаются на NPU1. Для запуска требуется совместимый runtime taconite-clip и соответствующий драйверный стек.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

CLIP ViT-H/14 image and text embeddings on the AMD NPU

An IRON export of laion/CLIP-ViT-H-14-laion2B-s32B-b79K for AMD Ryzen AI NPUs: the compiled NPU kernels (.xclbin + instruction streams) and the packed weights the taconite-clip Rust runtime replays, over XRT or directly over the amdxdna driver.

The kernels are compiled for NPU2 (AIE2P: Strix Point, Strix Halo, Krackan) and will not load on NPU1 (Phoenix, Hawk Point).

Download

hf download brishen/iron-clip-vit-h14-npu2 --local-dir clip-vit-h14
# or, from an IRON checkout:
python scripts/hf_models.py download clip-vit-h14 --repo brishen/iron-clip-vit-h14-npu2 --out clip-vit-h14

Usage

cargo install taconite-clip             # over XRT
# or, with no XRT at all (straight to the amdxdna driver):
cargo install taconite-clip --no-default-features --features cli,direct
clip classify clip-vit-h14 cats.jpg car.png --label cat --label dog --label car
clip embed clip-vit-h14 --image a.jpg --text "a photo of a cat" -o emb.f32
clip check clip-vit-h14                        # every stage against the references

See taconite-clip (docs, source) for the full API. The bundle is exported by IRON's iron/applications/clip_vit_h14.

Provenance

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

В репозитории нет config.json: не понять архитектуру модели.

Ревизия весов
5283a42

0 моделей

    Создать бенчмарк