/ Модель

Характеристики

Лицензия
Apache 2.0
Библиотека
pytorch
Опубликована
25 фев 2024

DETR-ResNet101

Поиск объектовИзображение → bounding_boxes3 профессии

DETR-ResNet101 — модель обнаружения объектов, разработанная на основе архитектуры DETR с backbone ResNet101 и адаптированная Qualcomm для устройств на базе Qualcomm.

1 277скачиваний за 30 дней0лайковвеса обновлены7 окт 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель обучена на наборе данных COCO и предназначена для обнаружения объектов на изображениях, включая сценарии компьютерного зрения на мобильных, встраиваемых и периферийных устройствах.

Модель принимает изображения с разрешением 480×480 пикселей, содержит около 60,3 млн параметров и занимает примерно 230 МБ в формате float. В репозитории доступны варианты ONNX, QNN_DLC и TFLITE, включая float и смешанную INT8/INT16-квантизацию w8a16_mixed_int16. Предусмотрено выполнение на NPU устройств Qualcomm; заявленная задержка инференса зависит от чипсета и формата и составляет примерно от 11,8 мс на Snapdragon 8 Elite Gen 5 Mobile до 56,9 мс на Qualcomm Dragonwing QCS8550 в отдельных конфигурациях.

Сильными сторонами модели являются использование DETR для обнаружения объектов, готовые экспортированные артефакты для Qualcomm AI Hub и возможность экспорта с пользовательскими весами, формами входных данных и целевыми конфигурациями. Ограничения включают значительный размер модели, зависимость производительности и потребления памяти от конкретного устройства и отсутствие в README сведений о точности, поддерживаемых классах за пределами COCO и детальных требованиях к входным данным. Лицензия — Apache 2.0.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

DETR-ResNet101: Optimized for Qualcomm Devices

DETR is a machine learning model that can detect objects (trained on COCO dataset).

This is based on the implementation of DETR-ResNet101 found here. This repository contains pre-exported model files optimized for Qualcomm® devices. You can use the Qualcomm® AI Hub Models library to export with custom configurations. More details on model performance across various devices, can be found here.

Qualcomm AI Hub Models uses Qualcomm AI Hub Workbench to compile, profile, and evaluate this model. Sign up to run these models on a hosted Qualcomm® device.

Getting Started

There are two ways to deploy this model on your device:

Option 1: Download Pre-Exported Models

Below are pre-exported model assets ready for deployment.

RuntimePrecisionChipsetSDK VersionsDownload
ONNXfloatUniversalQAIRT 2.50, ONNX Runtime 1.27.1Download
ONNXw8a16_mixed_int16UniversalQAIRT 2.50, ONNX Runtime 1.27.1Download
QNN_DLCfloatUniversalQAIRT 2.50Download
QNN_DLCw8a16_mixed_int16UniversalQAIRT 2.50Download
TFLITEfloatUniversalQAIRT 2.50Download

For more device-specific assets and performance metrics, visit DETR-ResNet101 on Qualcomm® AI Hub.

Option 2: Export with Custom Configurations

Use the Qualcomm® AI Hub Models Python library to compile and export the model with your own:

  • Custom weights (e.g., fine-tuned checkpoints)
  • Custom input shapes
  • Target device and runtime configurations

This option is ideal if you need to customize the model beyond the default configuration provided here.

See our repository for DETR-ResNet101 on GitHub for usage instructions.

Model Details

Model Type: Model_use_case.object_detection

Model Stats:

  • Input resolution: 480x480
  • Model checkpoint: ResNet101
  • Model size (float): 230 MB
  • Number of parameters: 60.3M

Performance Summary

ModelRuntimePrecisionChipsetInference Time (ms)Peak Memory Range (MB)Primary Compute Unit
DETR-ResNet101ONNXfloatSnapdragon® 8 Elite Gen 5 For Galaxy Mobile10.611 ms0 - 327 MBNPU
DETR-ResNet101ONNXfloatSnapdragon® 8 Elite For Galaxy Mobile14.449 ms0 - 308 MBNPU
DETR-ResNet101ONNXfloatSnapdragon® X2 Elite11.857 ms5 - 5 MBNPU
DETR-ResNet101ONNXfloatSnapdragon® X Elite24.655 ms114 - 114 MBNPU
DETR-ResNet101ONNXfloatSnapdragon® 8 Gen 3 Mobile18.977 ms0 - 439 MBNPU
DETR-ResNet101ONNXfloatSnapdragon® 8 Gen 1 Mobile37.762 ms1 - 355 MBNPU
DETR-ResNet101ONNXfloatQualcomm® Dragonwing™ IQ-827542.002 ms5 - 13 MBNPU
DETR-ResNet101ONNXfloatQualcomm® Dragonwing™ QCS8550 (Proxy)24.935 ms0 - 126 MBNPU
DETR-ResNet101ONNXfloatQualcomm® QCS845037.762 ms1 - 355 MBNPU
DETR-ResNet101ONNXfloatQualcomm® Dragonwing™ IQ-907538.898 ms5 - 13 MBNPU
DETR-ResNet101ONNXfloatQualcomm® Dragonwing™ IQ-X718124.655 ms114 - 114 MBNPU
DETR-ResNet101ONNXfloatQualcomm® Dragonwing™ Q-875014.449 ms0 - 308 MBNPU
DETR-ResNet101ONNXw8a16_mixed_int16Snapdragon® 8 Elite Gen 5 For Galaxy Mobile35.174 ms13 - 335 MBNPU
DETR-ResNet101ONNXw8a16_mixed_int16Snapdragon® 8 Elite For Galaxy Mobile40.801 ms13 - 306 MBNPU
DETR-ResNet101ONNXw8a16_mixed_int16Snapdragon® 8 Gen 3 Mobile48.91 ms17 - 456 MBNPU
DETR-ResNet101ONNXw8a16_mixed_int16Qualcomm® Dragonwing™ QCS8550 (Proxy)58.062 ms0 - 731 MBNPU
DETR-ResNet101ONNXw8a16_mixed_int16Qualcomm® Dragonwing™ Q-875040.801 ms13 - 306 MBNPU
DETR-ResNet101QNN_DLCfloatSnapdragon® 8 Elite Gen 5 For Galaxy Mobile10.9 ms5 - 331 MBNPU
DETR-ResNet101QNN_DLCfloatSnapdragon® 8 Elite For Galaxy Mobile14.814 ms0 - 310 MBNPU
DETR-ResNet101QNN_DLCfloatSnapdragon® X2 Elite12.617 ms5 - 5 MBNPU
DETR-ResNet101QNN_DLCfloatSnapdragon® X Elite26.036 ms5 - 5 MBNPU
DETR-ResNet101QNN_DLCfloatSnapdragon® 8 Gen 3 Mobile18.707 ms2 - 421 MBNPU
DETR-ResNet101QNN_DLCfloatSnapdragon® 8 Gen 1 Mobile39.236 ms4 - 333 MBNPU
DETR-ResNet101QNN_DLCfloatQualcomm® Dragonwing™ IQ-827541.336 ms5 - 12 MBNPU
DETR-ResNet101QNN_DLCfloatQualcomm® Dragonwing™ QCS8550 (Proxy)25.961 ms5 - 362 MBNPU
DETR-ResNet101QNN_DLCfloatQualcomm® SA8775P38.345 ms1 - 305 MBNPU
DETR-ResNet101QNN_DLCfloatQualcomm® SA8650P38.345 ms1 - 305 MBNPU
DETR-ResNet101QNN_DLCfloatQualcomm® SA8255P38.345 ms1 - 305 MBNPU
DETR-ResNet101QNN_DLCfloatQualcomm® QCS845039.236 ms4 - 333 MBNPU
DETR-ResNet101QNN_DLCfloatQualcomm® Dragonwing™ IQ-907538.677 ms5 - 12 MBNPU
DETR-ResNet101QNN_DLCfloatQualcomm® Dragonwing™ IQ-X718126.036 ms5 - 5 MBNPU
DETR-ResNet101QNN_DLCfloatQualcomm® Dragonwing™ Q-875014.814 ms0 - 310 MBNPU
DETR-ResNet101QNN_DLCfloatQualcomm® SA8295P42.989 ms3 - 229 MBNPU
DETR-ResNet101QNN_DLCw8a16_mixed_int16Snapdragon® 8 Elite Gen 5 For Galaxy Mobile12.191 ms2 - 356 MBNPU
DETR-ResNet101QNN_DLCw8a16_mixed_int16Snapdragon® 8 Elite For Galaxy Mobile14.324 ms0 - 322 MBNPU
DETR-ResNet101QNN_DLCw8a16_mixed_int16Snapdragon® X2 Elite12.761 ms2 - 2 MBNPU
DETR-ResNet101QNN_DLCw8a16_mixed_int16Snapdragon® X Elite24.475 ms2 - 2 MBNPU
DETR-ResNet101QNN_DLCw8a16_mixed_int16Snapdragon® 8 Gen 3 Mobile18.635 ms0 - 466 MBNPU
DETR-ResNet101QNN_DLCw8a16_mixed_int16Qualcomm® Dragonwing™ IQ-827524.016 ms2 - 8 MBNPU
DETR-ResNet101QNN_DLCw8a16_mixed_int16Qualcomm® Dragonwing™ QCS8550 (Proxy)23.605 ms2 - 5 MBNPU
DETR-ResNet101QNN_DLCw8a16_mixed_int16Qualcomm® SA8650P24.375 ms0 - 335 MBNPU
DETR-ResNet101QNN_DLCw8a16_mixed_int16Qualcomm® SA8255P24.375 ms0 - 335 MBNPU
DETR-ResNet101QNN_DLCw8a16_mixed_int16Qualcomm® Dragonwing™ IQ-907524.715 ms2 - 7 MBNPU
DETR-ResNet101QNN_DLCw8a16_mixed_int16Qualcomm® Dragonwing™ IQ-X718124.475 ms2 - 2 MBNPU
DETR-ResNet101QNN_DLCw8a16_mixed_int16Qualcomm® Dragonwing™ Q-6690335.631 ms3 - 405 MBNPU
DETR-ResNet101QNN_DLCw8a16_mixed_int16Qualcomm® Dragonwing™ Q-779033.537 ms2 - 389 MBNPU
DETR-ResNet101QNN_DLCw8a16_mixed_int16Qualcomm® Dragonwing™ Q-875014.324 ms0 - 322 MBNPU
DETR-ResNet101QNN_DLCw8a16_mixed_int16Snapdragon® 7 Gen 4 Mobile33.537 ms2 - 389 MBNPU
DETR-ResNet101TFLITEfloatSnapdragon® 8 Elite Gen 5 For Galaxy Mobile10.944 ms0 - 375 MBNPU
DETR-ResNet101TFLITEfloatSnapdragon® 8 Elite For Galaxy Mobile14.815 ms0 - 357 MBNPU
DETR-ResNet101TFLITEfloatSnapdragon® 8 Gen 3 Mobile18.649 ms0 - 465 MBNPU
DETR-ResNet101TFLITEfloatSnapdragon® 8 Gen 1 Mobile39.404 ms0 - 369 MBNPU
DETR-ResNet101TFLITEfloatQualcomm® Dragonwing™ IQ-827541.232 ms0 - 126 MBNPU
DETR-ResNet101TFLITEfloatQualcomm® Dragonwing™ QCS8550 (Proxy)25.932 ms0 - 4 MBNPU
DETR-ResNet101TFLITEfloatQualcomm® SA8775P38.433 ms0 - 353 MBNPU
DETR-ResNet101TFLITEfloatQualcomm® SA8650P38.433 ms0 - 353 MBNPU
DETR-ResNet101TFLITEfloatQualcomm® SA8255P38.433 ms0 - 353 MBNPU
DETR-ResNet101TFLITEfloatQualcomm® QCS845039.404 ms0 - 369 MBNPU
DETR-ResNet101TFLITEfloatQualcomm® Dragonwing™ IQ-907538.731 ms0 - 126 MBNPU
DETR-ResNet101TFLITEfloatQualcomm® Dragonwing™ Q-875014.815 ms0 - 357 MBNPU
DETR-ResNet101TFLITEfloatQualcomm® SA7255P131.868 ms0 - 353 MBNPU
DETR-ResNet101TFLITEfloatQualcomm® SA8295P43.095 ms0 - 268 MBNPU

License

  • The license for the original implementation of DETR-ResNet101 can be found here.

References

Community

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · pytorch

Нельзя запустить

Библиотека «pytorch» рантаймом не поддерживается.

Ревизия весов
c65bca8

0 моделей