/ Модель

Характеристики

Лицензия
BSD 3-Clause
Библиотека
pytorch
Опубликована
25 фев 2024

FFNet-54S

Сегментация изображенийИзображение → mask3 профессии

FFNet-54S — модель семантической сегментации изображений уличных сцен, разработанная Qualcomm на основе реализации FFNet.

1 299скачиваний за 30 дней1лайквеса обновлены7 окт 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель обучена на датасете Cityscapes и выполняет попиксельную классификацию объектов, включая дорогу, тротуар и пешеходов. Она предназначена для компьютерного зрения на устройствах Qualcomm, в том числе для Android и других целевых платформ с поддержкой соответствующих runtime.

Модель принимает изображения разрешением 2048×1024 и формирует 19 классов сегментации. Она содержит около 18 млн параметров; размер float-версии составляет 68,8 МБ, а квантованной конфигурации w8a8 — 17,5 МБ. Доступны предварительно экспортированные варианты в форматах ONNX, QNN_DLC и TFLITE, а также конфигурации float и w8a8. Оптимизация ориентирована на выполнение на NPU устройств Qualcomm; заявленное время инференса зависит от чипсета и составляет примерно от 7 до 124 мс для представленных конфигураций.

Сильными сторонами модели являются специализация на уличных сценах, поддержка высокой входной разрешающей способности, наличие квантованной версии с меньшим размером и готовых артефактов для различных runtime Qualcomm. Ограничения включают узкую предметную область, отсутствие сведений о других модальностях и языках, а также зависимость производительности и совместимости от конкретного устройства, runtime и SDK. Лицензия — BSD 3-Clause.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

FFNet-54S: Optimized for Qualcomm Devices

FFNet-54S is a "fuss-free network" that segments street scene images with per-pixel classes like road, sidewalk, and pedestrian. Trained on the Cityscapes dataset.

This is based on the implementation of FFNet-54S found here. This repository contains pre-exported model files optimized for Qualcomm® devices. You can use the Qualcomm® AI Hub Models library to export with custom configurations. More details on model performance across various devices, can be found here.

Qualcomm AI Hub Models uses Qualcomm AI Hub Workbench to compile, profile, and evaluate this model. Sign up to run these models on a hosted Qualcomm® device.

Getting Started

There are two ways to deploy this model on your device:

Option 1: Download Pre-Exported Models

Below are pre-exported model assets ready for deployment.

RuntimePrecisionChipsetSDK VersionsDownload
ONNXfloatUniversalQAIRT 2.50, ONNX Runtime 1.30.0Download
ONNXw8a8UniversalQAIRT 2.50, ONNX Runtime 1.30.0Download
QNN_DLCfloatUniversalQAIRT 2.50Download
QNN_DLCw8a8UniversalQAIRT 2.50Download
TFLITEfloatUniversalQAIRT 2.50Download
TFLITEw8a8UniversalQAIRT 2.50Download

For more device-specific assets and performance metrics, visit FFNet-54S on Qualcomm® AI Hub.

Option 2: Export with Custom Configurations

Use the Qualcomm® AI Hub Models Python library to compile and export the model with your own:

  • Custom weights (e.g., fine-tuned checkpoints)
  • Custom input shapes
  • Target device and runtime configurations

This option is ideal if you need to customize the model beyond the default configuration provided here.

See our repository for FFNet-54S on GitHub for usage instructions.

Model Details

Model Type: Model_use_case.semantic_segmentation

Model Stats:

  • Input resolution: 2048x1024
  • Model checkpoint: ffnet54S_dBBB_cityscapes_state_dict_quarts
  • Model size (float): 68.8 MB
  • Model size (w8a8): 17.5 MB
  • Number of output classes: 19
  • Number of parameters: 18.0M

Performance Summary

ModelRuntimePrecisionChipsetInference Time (ms)Peak Memory Range (MB)Primary Compute Unit
FFNet-54SONNXfloatSnapdragon® 8 Elite Gen 5 For Galaxy Mobile14.41 ms5 - 213 MBNPU
FFNet-54SONNXfloatSnapdragon® 8 Elite For Galaxy Mobile18.781 ms8 - 194 MBNPU
FFNet-54SONNXfloatSnapdragon® X2 Elite15.297 ms24 - 24 MBNPU
FFNet-54SONNXfloatSnapdragon® X Elite32.88 ms24 - 24 MBNPU
FFNet-54SONNXfloatSnapdragon® 8 Gen 3 Mobile26.942 ms1 - 268 MBNPU
FFNet-54SONNXfloatSnapdragon® 8 Gen 1 Mobile50.384 ms24 - 286 MBNPU
FFNet-54SONNXfloatQualcomm® Dragonwing™ IQ-827549.104 ms24 - 52 MBNPU
FFNet-54SONNXfloatQualcomm® Dragonwing™ QCS8550 (Proxy)33.274 ms24 - 26 MBNPU
FFNet-54SONNXfloatQualcomm® QCS845050.384 ms24 - 286 MBNPU
FFNet-54SONNXfloatQualcomm® Dragonwing™ IQ-907547.619 ms24 - 51 MBNPU
FFNet-54SONNXfloatQualcomm® Dragonwing™ IQ-X718132.88 ms24 - 24 MBNPU
FFNet-54SONNXfloatQualcomm® Dragonwing™ Q-875018.781 ms8 - 194 MBNPU
FFNet-54SONNXw8a8Snapdragon® 8 Elite Gen 5 For Galaxy Mobile3.82 ms1 - 195 MBNPU
FFNet-54SONNXw8a8Snapdragon® 8 Elite For Galaxy Mobile5.173 ms1 - 196 MBNPU
FFNet-54SONNXw8a8Snapdragon® X2 Elite4.255 ms7 - 7 MBNPU
FFNet-54SONNXw8a8Snapdragon® X Elite11.053 ms13 - 13 MBNPU
FFNet-54SONNXw8a8Snapdragon® 8 Gen 3 Mobile6.869 ms7 - 263 MBNPU
FFNet-54SONNXw8a8Snapdragon® 8 Gen 1 Mobile14.867 ms8 - 265 MBNPU
FFNet-54SONNXw8a8Qualcomm® Dragonwing™ QCS649045.895 ms6 - 9 MBNPU
FFNet-54SONNXw8a8Qualcomm® Dragonwing™ IQ-827510.262 ms6 - 10 MBNPU
FFNet-54SONNXw8a8Qualcomm® Dragonwing™ QCS8550 (Proxy)10.435 ms0 - 165 MBNPU
FFNet-54SONNXw8a8Qualcomm® QCS845014.867 ms8 - 265 MBNPU
FFNet-54SONNXw8a8Qualcomm® Dragonwing™ IQ-907511.98 ms6 - 9 MBNPU
FFNet-54SONNXw8a8Qualcomm® Dragonwing™ IQ-X718111.053 ms13 - 13 MBNPU
FFNet-54SONNXw8a8Qualcomm® Dragonwing™ Q-6690128.65 ms5 - 210 MBNPU
FFNet-54SONNXw8a8Qualcomm® Dragonwing™ Q-779015.749 ms7 - 218 MBNPU
FFNet-54SONNXw8a8Qualcomm® Dragonwing™ Q-87505.173 ms1 - 196 MBNPU
FFNet-54SONNXw8a8Snapdragon® 7 Gen 4 Mobile15.749 ms7 - 218 MBNPU
FFNet-54SQNN_DLCfloatSnapdragon® 8 Elite Gen 5 For Galaxy Mobile13.413 ms20 - 243 MBNPU
FFNet-54SQNN_DLCfloatSnapdragon® 8 Elite For Galaxy Mobile19.684 ms15 - 222 MBNPU
FFNet-54SQNN_DLCfloatSnapdragon® X2 Elite16.049 ms24 - 24 MBNPU
FFNet-54SQNN_DLCfloatSnapdragon® X Elite40.229 ms24 - 24 MBNPU
FFNet-54SQNN_DLCfloatSnapdragon® 8 Gen 3 Mobile27.956 ms16 - 286 MBNPU
FFNet-54SQNN_DLCfloatSnapdragon® 8 Gen 1 Mobile53.836 ms5 - 270 MBNPU
FFNet-54SQNN_DLCfloatQualcomm® Dragonwing™ IQ-827554.254 ms24 - 53 MBNPU
FFNet-54SQNN_DLCfloatQualcomm® Dragonwing™ QCS8550 (Proxy)38.996 ms24 - 26 MBNPU
FFNet-54SQNN_DLCfloatQualcomm® SA8775P53.833 ms24 - 214 MBNPU
FFNet-54SQNN_DLCfloatQualcomm® SA8650P53.833 ms24 - 214 MBNPU
FFNet-54SQNN_DLCfloatQualcomm® SA8255P53.833 ms24 - 214 MBNPU
FFNet-54SQNN_DLCfloatQualcomm® QCS845053.836 ms5 - 270 MBNPU
FFNet-54SQNN_DLCfloatQualcomm® Dragonwing™ IQ-907554.5 ms24 - 53 MBNPU
FFNet-54SQNN_DLCfloatQualcomm® Dragonwing™ IQ-X718140.229 ms24 - 24 MBNPU
FFNet-54SQNN_DLCfloatQualcomm® Dragonwing™ Q-875019.684 ms15 - 222 MBNPU
FFNet-54SQNN_DLCfloatQualcomm® SA8295P58.662 ms24 - 215 MBNPU
FFNet-54SQNN_DLCw8a8Snapdragon® 8 Elite Gen 5 For Galaxy Mobile5.66 ms6 - 226 MBNPU
FFNet-54SQNN_DLCw8a8Snapdragon® 8 Elite For Galaxy Mobile7.605 ms6 - 215 MBNPU
FFNet-54SQNN_DLCw8a8Snapdragon® X2 Elite6.587 ms6 - 6 MBNPU
FFNet-54SQNN_DLCw8a8Snapdragon® X Elite16.782 ms6 - 6 MBNPU
FFNet-54SQNN_DLCw8a8Snapdragon® 8 Gen 3 Mobile11.044 ms6 - 255 MBNPU
FFNet-54SQNN_DLCw8a8Snapdragon® 8 Gen 1 Mobile18.309 ms6 - 259 MBNPU
FFNet-54SQNN_DLCw8a8Qualcomm® Dragonwing™ QCS649049.525 ms6 - 15 MBNPU
FFNet-54SQNN_DLCw8a8Qualcomm® Dragonwing™ IQ-827515.544 ms3 - 13 MBNPU
FFNet-54SQNN_DLCw8a8Qualcomm® Dragonwing™ QCS8550 (Proxy)15.785 ms6 - 8 MBNPU
FFNet-54SQNN_DLCw8a8Qualcomm® SA8775P16.296 ms6 - 202 MBNPU
FFNet-54SQNN_DLCw8a8Qualcomm® SA8650P16.296 ms6 - 202 MBNPU
FFNet-54SQNN_DLCw8a8Qualcomm® SA8255P16.296 ms6 - 202 MBNPU
FFNet-54SQNN_DLCw8a8Qualcomm® QCS845018.309 ms6 - 259 MBNPU
FFNet-54SQNN_DLCw8a8Qualcomm® Dragonwing™ IQ-907516.281 ms6 - 15 MBNPU
FFNet-54SQNN_DLCw8a8Qualcomm® Dragonwing™ IQ-X718116.782 ms6 - 6 MBNPU
FFNet-54SQNN_DLCw8a8Qualcomm® Dragonwing™ Q-6690146.609 ms6 - 204 MBNPU
FFNet-54SQNN_DLCw8a8Qualcomm® Dragonwing™ Q-779020.071 ms6 - 216 MBNPU
FFNet-54SQNN_DLCw8a8Qualcomm® Dragonwing™ Q-87507.605 ms6 - 215 MBNPU
FFNet-54SQNN_DLCw8a8Qualcomm® SA7255P35.395 ms6 - 201 MBNPU
FFNet-54SQNN_DLCw8a8Qualcomm® SA8295P21.294 ms6 - 205 MBNPU
FFNet-54SQNN_DLCw8a8Snapdragon® 7 Gen 4 Mobile20.071 ms6 - 216 MBNPU
FFNet-54STFLITEfloatSnapdragon® 8 Elite Gen 5 For Galaxy Mobile13.584 ms2 - 243 MBNPU
FFNet-54STFLITEfloatSnapdragon® 8 Elite For Galaxy Mobile19.647 ms2 - 229 MBNPU
FFNet-54STFLITEfloatSnapdragon® 8 Gen 3 Mobile28.168 ms2 - 320 MBNPU
FFNet-54STFLITEfloatSnapdragon® 8 Gen 1 Mobile54.033 ms3 - 314 MBNPU
FFNet-54STFLITEfloatQualcomm® Dragonwing™ IQ-827554.497 ms0 - 65 MBNPU
FFNet-54STFLITEfloatQualcomm® Dragonwing™ QCS8550 (Proxy)39.381 ms3 - 5 MBNPU
FFNet-54STFLITEfloatQualcomm® QCS845054.033 ms3 - 314 MBNPU
FFNet-54STFLITEfloatQualcomm® Dragonwing™ IQ-907555.108 ms0 - 64 MBNPU
FFNet-54STFLITEfloatQualcomm® Dragonwing™ Q-875019.647 ms2 - 229 MBNPU
FFNet-54STFLITEfloatQualcomm® SA7255P157.083 ms3 - 213 MBNPU
FFNet-54STFLITEfloatQualcomm® SA8295P58.735 ms3 - 214 MBNPU
FFNet-54STFLITEw8a8Snapdragon® 8 Elite Gen 5 For Galaxy Mobile3.342 ms1 - 221 MBNPU
FFNet-54STFLITEw8a8Snapdragon® 8 Elite For Galaxy Mobile4.387 ms1 - 207 MBNPU
FFNet-54STFLITEw8a8Snapdragon® 8 Gen 3 Mobile5.784 ms1 - 250 MBNPU
FFNet-54STFLITEw8a8Snapdragon® 8 Gen 1 Mobile10.034 ms0 - 253 MBNPU
FFNet-54STFLITEw8a8Qualcomm® Dragonwing™ QCS649033.719 ms0 - 28 MBNPU
FFNet-54STFLITEw8a8Qualcomm® Dragonwing™ IQ-82758.789 ms1 - 28 MBNPU
FFNet-54STFLITEw8a8Qualcomm® Dragonwing™ QCS8550 (Proxy)8.123 ms1 - 3 MBNPU
FFNet-54STFLITEw8a8Qualcomm® QCS845010.034 ms0 - 253 MBNPU
FFNet-54STFLITEw8a8Qualcomm® Dragonwing™ IQ-90758.691 ms1 - 28 MBNPU
FFNet-54STFLITEw8a8Qualcomm® Dragonwing™ Q-6690120.128 ms1 - 197 MBNPU
FFNet-54STFLITEw8a8Qualcomm® Dragonwing™ Q-779012.508 ms1 - 208 MBNPU
FFNet-54STFLITEw8a8Qualcomm® Dragonwing™ Q-87504.387 ms1 - 207 MBNPU
FFNet-54STFLITEw8a8Qualcomm® SA7255P22.669 ms1 - 194 MBNPU
FFNet-54STFLITEw8a8Qualcomm® SA8295P12.943 ms1 - 199 MBNPU
FFNet-54STFLITEw8a8Snapdragon® 7 Gen 4 Mobile12.508 ms1 - 208 MBNPU

License

  • The license for the original implementation of FFNet-54S can be found here.

References

Community

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · pytorch

Нельзя запустить

Библиотека «pytorch» рантаймом не поддерживается.

Ревизия весов
7a2831f

0 моделей