/ Модель

Характеристики

Лицензия
CC BY-NC 4.0
Библиотека
wildlife-datasets
Опубликована
14 фев 2025

MegaDescriptor-T-CNN-288

Классификация изображенийИзображение → label3 профессии

Модель на базе EfficientNetB3 извлекает эмбеддинги фотографий животных для поиска и повторной идентификации особей.

70 522скачиваний за 30 дней1лайквеса обновлены14 фев 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

MegaDescriptor-T-CNN-288 — модель извлечения визуальных признаков для повторной идентификации животных, созданная на основе EfficientNetB3 и предварительно обученная Supervisely на наборах данных для реидентификации животных. В README указаны 12,2 млн параметров, 1,6 GMACs и размер входного изображения 288 × 288 пикселей.

Модель формирует эмбеддинги изображений, которые можно использовать для сравнения фотографий животных и поиска повторных наблюдений одной особи. Она предназначена для исследовательских и прикладных сценариев мониторинга дикой природы и анализа наборов фотографий. В карточке также указан тег image-classification, но описанное назначение модели — извлечение признаков для реидентификации.

Модель распространяется под лицензией CC BY-NC 4.0, которая ограничивает коммерческое использование. Качество идентификации может зависеть от вида животного, условий съёмки и данных, на которых применяется модель.

Сценарии применения

  • поиск фотографий одной и той же особи в коллекции
  • сопоставление наблюдений животных с разных камер
  • группировка снимков диких животных по особям
  • построение систем мониторинга дикой природы по фотоловушкам

Ограничения

Лицензия CC BY-NC 4.0 ограничивает коммерческое использование. Точность сопоставления зависит от видов животных, качества снимков и соответствия целевых данных обучающим наборам.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Model card for MegaDescriptor-T-CNN-288

A EfficientNetB3 based image feature model. Supervisely pre-trained on animal re-identification datasets.

Model Details

Model Usage

Image Embeddings


import timm
import torch
import torchvision.transforms as T

from PIL import Image
from urllib.request import urlopen

model = timm.create_model("hf-hub:BVRA/MegaDescriptor-EfficientNetB3", pretrained=True)
model = model.eval()

transforms = T.Compose([T.Resize(288), 
                              T.ToTensor(), 
                              T.Normalize([0.485, 0.456, 0.406], [0.229, 0.224, 0.225])]) 

img = Image.open(urlopen(
    'https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/beignets-task-guide.png'
))

output = model(transforms(img).unsqueeze(0))  # output is (batch_size, num_features) shaped tensor
# output is a (1, num_features) shaped tensor

Citation

@inproceedings{vcermak2024wildlifedatasets,
  title={WildlifeDatasets: An open-source toolkit for animal re-identification},
  author={{\v{C}}erm{\'a}k, Vojt{\v{e}}ch and Picek, Lukas and Adam, Luk{\'a}{\v{s}} and Papafitsoros, Kostas},
  booktitle={Proceedings of the IEEE/CVF Winter Conference on Applications of Computer Vision},
  pages={5953--5963},
  year={2024}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · wildlife-datasets · image-classification

Нельзя запустить

Архитектура ? неизвестна transformers в образе рантайма.

Ревизия весов
cada271

0 моделей