/ Модель

Характеристики

Лицензия
MIT
Библиотека
timm
Опубликована
20 мар 2023

rexnet_150.nav_in1k

Классификация изображенийИзображение → label3 профессии

Компактная свёрточная модель ReXNet-150 для классификации изображений и извлечения визуальных признаков, обученная на ImageNet-1k.

78 472скачиваний за 30 дней0лайковвеса обновлены21 янв 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки8

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

  • imagenetv2-matched-frequency

    top5 · выше — лучше

    Результат

    88,99 %

    image-classification 69,46 %
    timm

    Публичная таблицаревизия не подтверждена

  • imagenet

    top5 · выше — лучше

    Результат

    95,164 %

    image-classification 80,322 %
    timm

    Публичная таблицаревизия не подтверждена

  • sketch

    top1 · выше — лучше

    Результат

    31,431 %

    image-classification 51,325 %
    timm

    Публичная таблицаревизия не подтверждена

  • imagenet-a

    top5 · выше — лучше

    Результат

    46,4 %

    image-classification 14,373 %
    timm

    Публичная таблицаревизия не подтверждена

  • imagenet-r

    top1 · выше — лучше

    Результат

    43,61 %

    image-classification 60,867 %
    timm

    Публичная таблицаревизия не подтверждена

  • imagenet-real

    top1 · выше — лучше

    Результат

    86,178 %

    image-classification 97,064 %
    timm

    Публичная таблицаревизия не подтверждена

  • imagenet-a-clean

    top5 · выше — лучше

    Результат

    98,79 %

    image-classification 94,48 %
    timm

    Публичная таблицаревизия не подтверждена

  • imagenet-r-clean

    top1 · выше — лучше

    Результат

    94,29 %

    image-classification 99,09 %
    timm

    Публичная таблицаревизия не подтверждена

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

ReXNet-150 — свёрточная модель классификации изображений из семейства ReXNet, опубликованная авторами работы «Rethinking Channel Dimensions for Efficient Model Design» и представленная в библиотеке timm. Модель обучена на ImageNet-1k и содержит около 9,7 млн параметров; рекомендуемый размер входного изображения — 224 × 224 пикселя.

Модель предназначена для классификации изображений по категориям ImageNet-1k. Её также можно использовать как основу для извлечения карт признаков и визуальных эмбеддингов. Компактный размер и вычислительная стоимость около 0,9 GMAC делают её подходящей для эффективных задач компьютерного зрения. Репозиторий содержит веса PyTorch и safetensors. Лицензия — MIT.

Сценарии применения

  • классификация фотографий по категориям ImageNet
  • извлечение карт признаков из изображений
  • получение эмбеддингов изображений для поиска и сравнения
  • использование в качестве визуального backbone для компьютерного зрения

Ограничения

Обучение выполнено на ImageNet-1k, поэтому классификатор ориентирован на его категории и может хуже работать с изображениями и классами вне этого набора данных. Для входа рекомендуется размер 224 × 224 пикселя.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Model card for rexnet_150.nav_in1k

A ReXNet image classification model. Pretrained on ImageNet-1k by paper authors.

Model Details

Model Usage

Image Classification

from urllib.request import urlopen
from PIL import Image
import timm

img = Image.open(urlopen(
    'https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/beignets-task-guide.png'
))

model = timm.create_model('rexnet_150.nav_in1k', pretrained=True)
model = model.eval()

# get model specific transforms (normalization, resize)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

output = model(transforms(img).unsqueeze(0))  # unsqueeze single image into batch of 1

top5_probabilities, top5_class_indices = torch.topk(output.softmax(dim=1) * 100, k=5)

Feature Map Extraction

from urllib.request import urlopen
from PIL import Image
import timm

img = Image.open(urlopen(
    'https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/beignets-task-guide.png'
))

model = timm.create_model(
    'rexnet_150.nav_in1k',
    pretrained=True,
    features_only=True,
)
model = model.eval()

# get model specific transforms (normalization, resize)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

output = model(transforms(img).unsqueeze(0))  # unsqueeze single image into batch of 1

for o in output:
    # print shape of each feature map in output
    # e.g.:
    #  torch.Size([1, 24, 112, 112])
    #  torch.Size([1, 58, 56, 56])
    #  torch.Size([1, 92, 28, 28])
    #  torch.Size([1, 193, 14, 14])
    #  torch.Size([1, 277, 7, 7])

    print(o.shape)

Image Embeddings

from urllib.request import urlopen
from PIL import Image
import timm

img = Image.open(urlopen(
    'https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/beignets-task-guide.png'
))

model = timm.create_model(
    'rexnet_150.nav_in1k',
    pretrained=True,
    num_classes=0,  # remove classifier nn.Linear
)
model = model.eval()

# get model specific transforms (normalization, resize)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

output = model(transforms(img).unsqueeze(0))  # output is (batch_size, num_features) shaped tensor

# or equivalently (without needing to set num_classes=0)

output = model.forward_features(transforms(img).unsqueeze(0))
# output is unpooled, a (1, 1920, 7, 7) shaped tensor

output = model.forward_head(output, pre_logits=True)
# output is a (1, num_features) shaped tensor

Model Comparison

Explore the dataset and runtime metrics of this model in timm model results."

modeltop1top5param_countimg_sizecrop_pct
rexnetr_300.sw_in12k_ft_in1k84.5397.25234.812881.0
rexnetr_200.sw_in12k_ft_in1k83.16496.64816.522881.0
rexnet_300.nav_in1k82.77296.23234.712240.875
rexnet_200.nav_in1k81.65295.66816.372240.875
rexnet_150.nav_in1k80.30895.1749.732240.875
rexnet_130.nav_in1k79.47894.687.562240.875
rexnet_100.nav_in1k77.83293.8864.82240.875

Citation

@misc{han2021rethinking,
  title={Rethinking Channel Dimensions for Efficient Model Design}, 
  author={Dongyoon Han and Sangdoo Yun and Byeongho Heo and YoungJoon Yoo},
  year={2021},
  eprint={2007.00992},
  archivePrefix={arXiv},
  primaryClass={cs.CV}
}  
@misc{rw2019timm,
  author = {Ross Wightman},
  title = {PyTorch Image Models},
  year = {2019},
  publisher = {GitHub},
  journal = {GitHub repository},
  doi = {10.5281/zenodo.4414861},
  howpublished = {\url{https://github.com/huggingface/pytorch-image-models}}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · timm · image-classification

Можно запустить

Подбираем GPU…

Ревизия весов
d8c6735

0 моделей