/ Модель

Характеристики

Лицензия
CC BY 4.0
Библиотека
timm
Опубликована
5 ноя 2023

resnet50.tiatoolbox-kather100k

Классификация изображенийИзображение → label3 профессии

ResNet50, обученная на гистологических патчах kather100k, классифицирует изображения тканей и извлекает признаки для анализа цифровой патологии.

1 404скачиваний за 30 дней1лайквеса обновлены5 ноя 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

ResNet50 для классификации изображений гистологических препаратов, обученная центром Tissue Image Analytics (TIA) на патчах датасета kather100k, также известного как NCT-CRC-HE. Модель содержит 23,6 млн параметров и рассчитана на изображения размером 224 × 224 пикселя с тремя цветовыми каналами.

Модель предназначена для классификации гистологических изображений и может использоваться как backbone для извлечения признаков и получения эмбеддингов. Подходит для анализа патчей тканей в исследовательских и прикладных рабочих процессах цифровой патологии. Репозиторий распространяет веса в формате safetensors; для работы используется библиотека timm.

Модель опубликована по лицензии Creative Commons Attribution 4.0 International (CC BY 4.0), требующей указания авторства. Обучение на конкретном наборе гистологических патчей ограничивает применимость к другим типам изображений и клиническим условиям; README не приводит оценок качества.

Сценарии применения

  • Классификация патчей гистологических изображений
  • Извлечение признаков из изображений тканевых срезов
  • Получение эмбеддингов гистологических патчей
  • Анализ изображений колоректальной ткани в исследовательских наборах данных

Ограничения

Модель обучена на гистологических патчах kather100k и может хуже работать на других тканях, окрасках или условиях получения изображений. В README не приведены метрики качества.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Model card for resnet50.tiatoolbox-kather100k

A ResNet50 image classification model.
Trained by Tissue Image Analytics (TIA) Centre on "kather100k" histology patches.

Model Details

Model Usage

Image Classification

from urllib.request import urlopen
from PIL import Image
import timm

# get example histology image
img = Image.open(
  urlopen(
    "https://github.com/owkin/HistoSSLscaling/raw/main/assets/example.tif"
  )
)

# load model from the hub
model = timm.create_model(
  model_name="hf-hub:1aurent/resnet50.tiatoolbox-kather100k",
  pretrained=True,
).eval()

# get model specific transforms (normalization, resize)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

data = transforms(img).unsqueeze(0) # input is a (batch_size, num_channels, img_size, img_size) shaped tensor
output = model(data)  # output is a (batch_size, num_features) shaped tensor

Image Embeddings

from urllib.request import urlopen
from PIL import Image
import timm

# get example histology image
img = Image.open(
  urlopen(
    "https://github.com/owkin/HistoSSLscaling/raw/main/assets/example.tif"
  )
)

# load model from the hub
model = timm.create_model(
  model_name="hf-hub:1aurent/resnet50.tiatoolbox-kather100k",
  pretrained=True,
  num_classes=0,
).eval()

# get model specific transforms (normalization, resize)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

data = transforms(img).unsqueeze(0) # input is a (batch_size, num_channels, img_size, img_size) shaped tensor
output = model(data)  # output is a (batch_size, num_features) shaped tensor

Citation

@article{Pocock2022,
  author    = {Pocock, Johnathan and Graham, Simon and Vu, Quoc Dang and Jahanifar, Mostafa and Deshpande, Srijay and Hadjigeorghiou, Giorgos and Shephard, Adam and Bashir, Raja Muhammad Saad and Bilal, Mohsin and Lu, Wenqi and Epstein, David and Minhas, Fayyaz and Rajpoot, Nasir M and Raza, Shan E Ahmed},
  doi       = {10.1038/s43856-022-00186-5},
  issn      = {2730-664X},
  journal   = {Communications Medicine},
  month     = {sep},
  number    = {1},
  pages     = {120},
  publisher = {Springer US},
  title     = {{TIAToolbox as an end-to-end library for advanced tissue image analytics}},
  url       = {https://www.nature.com/articles/s43856-022-00186-5},
  volume    = {2},
  year      = {2022}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · timm · image-classification

Можно запустить

Подбираем GPU…

Ревизия весов
8f1ebaa

0 моделей