/ Модель

Характеристики

Лицензия
CC0 1.0
Библиотека
timm
Опубликована
5 ноя 2023

resnet50.tiatoolbox-pcam

Классификация изображенийИзображение → label3 профессии

ResNet50, обученная на гистологических патчах PCam, классифицирует изображения ткани и извлекает признаки для их анализа.

348скачиваний за 30 дней0лайковвеса обновлены7 ноя 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

ResNet50 — модель классификации изображений и извлечения признаков, обученная центром Tissue Image Analytics (TIA) на гистологических патчах датасета Patch Camelyon (PCam). Она предназначена для анализа небольших изображений ткани и может использоваться как классификатор или как основа для получения эмбеддингов изображений.

Модель содержит 23,6 млн параметров и рассчитана на изображения размером 96 × 96 × 3. Репозиторий использует библиотеку timm и хранит веса в формате safetensors. Модель ориентирована на гистологические изображения, в частности на задачи, связанные с набором PCam.

Лицензия — Creative Commons Zero v1.0 Universal (CC0 1.0).

Сценарии применения

  • классификация гистологических патчей PCam
  • анализ изображений ткани размером 96 × 96
  • извлечение эмбеддингов из гистологических изображений
  • создание признаков для последующего анализа гистологии

Ограничения

Модель обучена на патчах датасета PCam и рассчитана на изображения 96 × 96 × 3; её пригодность для других типов тканей или клинического применения в карточке не подтверждена.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Model card for resnet50.tiatoolbox-pcam

A ResNet50 image classification model.
Trained by Tissue Image Analytics (TIA) Centre on "pcam" histology patches.

Model Details

Model Usage

Image Classification

from urllib.request import urlopen
from PIL import Image
import timm

# get example histology image
img = Image.open(
  urlopen(
    "https://github.com/owkin/HistoSSLscaling/raw/main/assets/example.tif"
  )
)

# load model from the hub
model = timm.create_model(
  model_name="hf-hub:1aurent/resnet50.tiatoolbox-pcam",
  pretrained=True,
).eval()

# get model specific transforms (normalization, resize)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

data = transforms(img).unsqueeze(0) # input is a (batch_size, num_channels, img_size, img_size) shaped tensor
output = model(data)  # output is a (batch_size, num_features) shaped tensor

Image Embeddings

from urllib.request import urlopen
from PIL import Image
import timm

# get example histology image
img = Image.open(
  urlopen(
    "https://github.com/owkin/HistoSSLscaling/raw/main/assets/example.tif"
  )
)

# load model from the hub
model = timm.create_model(
  model_name="hf-hub:1aurent/resnet50.tiatoolbox-pcam",
  pretrained=True,
  num_classes=0,
).eval()

# get model specific transforms (normalization, resize)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

data = transforms(img).unsqueeze(0) # input is a (batch_size, num_channels, img_size, img_size) shaped tensor
output = model(data)  # output is a (batch_size, num_features) shaped tensor

Citation

@article{Pocock2022,
  author    = {Pocock, Johnathan and Graham, Simon and Vu, Quoc Dang and Jahanifar, Mostafa and Deshpande, Srijay and Hadjigeorghiou, Giorgos and Shephard, Adam and Bashir, Raja Muhammad Saad and Bilal, Mohsin and Lu, Wenqi and Epstein, David and Minhas, Fayyaz and Rajpoot, Nasir M and Raza, Shan E Ahmed},
  doi       = {10.1038/s43856-022-00186-5},
  issn      = {2730-664X},
  journal   = {Communications Medicine},
  month     = {sep},
  number    = {1},
  pages     = {120},
  publisher = {Springer US},
  title     = {{TIAToolbox as an end-to-end library for advanced tissue image analytics}},
  url       = {https://www.nature.com/articles/s43856-022-00186-5},
  volume    = {2},
  year      = {2022}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · timm · image-classification

Можно запустить

Подбираем GPU…

Ревизия весов
8816cc5

0 моделей