/ Модель

Характеристики

Лицензия
CC BY-NC 4.0
Архитектура
ov_deim · dense
Библиотека
libreyolo
Опубликована
14 июл 2026

LibreOVDEIMm

Поиск объектовИзображение → bounding_boxes3 профессии

LibreOVDEIMm — модель обнаружения объектов на изображениях по текстовым запросам с открытым словарём.

18скачиваний за 30 дней0лайковвеса обновлены14 июл 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

LibreOVDEIMm — обнаружитель объектов с открытым словарём из линейки LibreYOLO, основанный на OV-DEIM-M. Он находит объекты на изображении по текстовым описаниям классов, включая произвольные названия и фразы вроде «человек», «красный рюкзак» или «погрузчик», которые передаются при запуске. Модель включает детектор примерно на 20 млн параметров с бэкбоном ViT-tinyplus, дистиллированным из DEIMv2, и текстовый энкодер MobileCLIP-B(LT) для кодирования запросов.

Артефакт создан на основе весов OV-DEIM от wleilei и текстового энкодера apple/MobileCLIP-B-LT-OpenCLIP. По README, параметры обучения детектора не менялись: выполнены преобразование ключей и упаковка компонентов. Исходный детектор обучен на Objects365v1 и GoldG; для исходной реализации сообщается скорость 109 кадров/с на T4 с TensorRT при размере входа 640, а порт LibreYOLO воспроизводит результат 45,9 AP на COCO val2017 для версии L. Эти показатели относятся к указанным конфигурациям и не гарантируют такую же скорость или качество в других условиях. Репозиторий распространяется по лицензии CC BY-NC 4.0, которая не разрешает коммерческое использование.

Сценарии применения

  • поиск объектов на изображениях по заданным текстовым названиям
  • обнаружение объектов по описательным фразам, например «красный рюкзак»
  • поиск погрузчиков и другой спецтехники на снимках
  • настройка классов обнаружения во время выполнения без фиксированного списка меток

Ограничения

Лицензия CC BY-NC 4.0 запрещает коммерческое использование. Заявленные скорость и точность относятся к конкретным конфигурациям и тестам; README не даёт гарантий тех же результатов на другом оборудовании и данных.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

LibreOVDEIMm

OV-DEIM-M real-time open-vocabulary detector (20M params, ViT-tinyplus (DEIMv2 distilled) backbone) repackaged for LibreYOLO's LibreOpenVocab tier, bundled with the MobileCLIP-B(LT) text tower for online prompt encoding.

Source

Detector converted from wleilei/OV-DEIM at commit dfbf394672407b7f837ec08e7d68e8127548b254 (checkpoint ovdeim_m.pth, trained on Objects365v1 + GoldG). Text encoder taken from apple/MobileCLIP-B-LT-OpenCLIP.

Paper: OV-DEIM: Real-time DETR-Style Open-Vocabulary Object Detection with GridSynthetic Augmentation (arXiv 2603.07022). Upstream reports 109 FPS on a T4 with TensorRT at 640 input.

Modifications

State-dict key remapping and merge only (module. prefix stripped, the training-only denoising embedding dropped, the MobileCLIP text tower stored under text_encoder.*). Learned parameters are unchanged. See weights/convert_ovdeim_weights.py in the LibreYOLO source repository.

LibreYOLO's port reproduces the upstream paper's zero-shot COCO val2017 result through this artifact (45.9 AP for the L size).

Usage

from libreyolo import LibreOpenVocab

model = LibreOpenVocab("ov-deim-m")
model.set_classes(["person", "a red backpack", "forklift"])
results = model.predict("image.jpg")

License

Layered, most restrictive governs the combined artifact:

See NOTICE for attribution details.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · libreyolo · object-detection

Нельзя запустить

Архитектура ov_deim неизвестна transformers в образе рантайма.

Ревизия весов
0d7d5d7

0 моделей