/ Модель

Характеристики

Лицензия
CC BY 4.0
Библиотека
timm
Опубликована
5 ноя 2023

resnet18.tiatoolbox-kather100k

Классификация изображенийИзображение → label

ResNet18, обученная на гистологических патчах kather100k, классифицирует изображения тканей и извлекает признаки для анализа гистологии.

188скачиваний за 30 дней2лайкавеса обновлены6 ноя 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

ResNet18 — модель классификации изображений, обученная центром Tissue Image Analytics (TIA) на гистологических патчах набора kather100k, также известного как NCT-CRC-HE. Она предназначена для классификации изображений тканей и может использоваться как backbone для извлечения признаков и получения эмбеддингов.

Модель содержит около 11,2 млн параметров и рассчитана на изображения размером 224 × 224 пикселя с тремя цветовыми каналами. Она доступна в формате safetensors и распространяется по лицензии Creative Commons Attribution 4.0 International. Область применения карточки — гистологические изображения; сведения о точности и ограничениях оценки в карточке не приведены.

Сценарии применения

  • классификация гистологических патчей тканей
  • анализ изображений колоректальной гистологии
  • извлечение признаков из изображений тканей
  • получение эмбеддингов гистологических изображений

Ограничения

Модель обучена на гистологических патчах kather100k, поэтому её переносимость на другие типы тканей и условия получения изображений требует отдельной проверки. В карточке не приведены показатели точности.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Model card for resnet18.tiatoolbox-kather100k

A ResNet18 image classification model.
Trained by Tissue Image Analytics (TIA) Centre on "kather100k" histology patches.

Model Details

Model Usage

Image Classification

from urllib.request import urlopen
from PIL import Image
import timm

# get example histology image
img = Image.open(
  urlopen(
    "https://github.com/owkin/HistoSSLscaling/raw/main/assets/example.tif"
  )
)

# load model from the hub
model = timm.create_model(
  model_name="hf-hub:1aurent/resnet18.tiatoolbox-kather100k",
  pretrained=True,
).eval()

# get model specific transforms (normalization, resize)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

data = transforms(img).unsqueeze(0) # input is a (batch_size, num_channels, img_size, img_size) shaped tensor
output = model(data)  # output is a (batch_size, num_features) shaped tensor

Image Embeddings

from urllib.request import urlopen
from PIL import Image
import timm

# get example histology image
img = Image.open(
  urlopen(
    "https://github.com/owkin/HistoSSLscaling/raw/main/assets/example.tif"
  )
)

# load model from the hub
model = timm.create_model(
  model_name="hf-hub:1aurent/resnet18.tiatoolbox-kather100k",
  pretrained=True,
  num_classes=0,
).eval()

# get model specific transforms (normalization, resize)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

data = transforms(img).unsqueeze(0) # input is a (batch_size, num_channels, img_size, img_size) shaped tensor
output = model(data)  # output is a (batch_size, num_features) shaped tensor

Citation

@article{Pocock2022,
  author    = {Pocock, Johnathan and Graham, Simon and Vu, Quoc Dang and Jahanifar, Mostafa and Deshpande, Srijay and Hadjigeorghiou, Giorgos and Shephard, Adam and Bashir, Raja Muhammad Saad and Bilal, Mohsin and Lu, Wenqi and Epstein, David and Minhas, Fayyaz and Rajpoot, Nasir M and Raza, Shan E Ahmed},
  doi       = {10.1038/s43856-022-00186-5},
  issn      = {2730-664X},
  journal   = {Communications Medicine},
  month     = {sep},
  number    = {1},
  pages     = {120},
  publisher = {Springer US},
  title     = {{TIAToolbox as an end-to-end library for advanced tissue image analytics}},
  url       = {https://www.nature.com/articles/s43856-022-00186-5},
  volume    = {2},
  year      = {2022}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · timm · image-classification

Можно запустить

Подбираем GPU…

Ревизия весов
cdf9afa

0 моделей