/ Модель

Характеристики

Лицензия
CC BY 4.0
Библиотека
timm
Опубликована
6 ноя 2023

densenet121.tiatoolbox-kather100k

Классификация изображенийИзображение → label

DenseNet-121, обученная на гистологических патчах Kather100K, классифицирует изображения тканей и извлекает признаки для их анализа.

315скачиваний за 30 дней0лайковвеса обновлены28 ноя 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

DenseNet-121 — модель классификации изображений, обученная центром Tissue Image Analytics (TIA) на гистологических патчах из набора Kather100K, также известного как NCT-CRC-HE. Модель содержит около 7,05 млн параметров и рассчитана на изображения размером 224 × 224 × 3.

Модель предназначена для классификации гистологических изображений тканей и может использоваться как основа для извлечения признаков и получения эмбеддингов. Она подходит для анализа патчей колоректальной ткани в исследовательских и прикладных гистологических сценариях. Репозиторий использует библиотеку timm и формат весов safetensors.

Модель выпущена по лицензии Creative Commons Attribution 4.0 International. Её обучение на конкретном наборе гистологических патчей ограничивает переносимость на другие ткани, окрашивания и типы изображений без дополнительной проверки.

Сценарии применения

  • классификация патчей колоректальной гистологии
  • анализ изображений ткани для выявления типов клеточной и тканевой структуры
  • извлечение эмбеддингов гистологических изображений
  • создание признаков для последующей классификации тканевых изображений

Ограничения

Обучение на патчах Kather100K ограничивает переносимость модели на другие типы тканей, окрашивания и источники изображений; для таких данных требуется отдельная проверка.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Model card for densenet121.tiatoolbox-kather100k

A DenseNet image classification model.
Trained by Tissue Image Analytics (TIA) Centre on "kather100k" histology patches.

Model Details

Model Usage

Image Classification

from urllib.request import urlopen
from PIL import Image
import torch.nn as nn
import timm

# get example histology image
img = Image.open(
  urlopen(
    "https://github.com/owkin/HistoSSLscaling/raw/main/assets/example.tif"
  )
)

# load model from the hub
model = timm.create_model(
  model_name="hf-hub:1aurent/densenet121.tiatoolbox-kather100k",
  pretrained=True,
).eval()

# get model specific transforms (normalization, resize)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

data = transforms(img).unsqueeze(0) # input is a (batch_size, num_channels, img_size, img_size) shaped tensor
output = model(data)  # output is a (batch_size, num_features) shaped tensor

Image Embeddings

from urllib.request import urlopen
from PIL import Image
import torch.nn as nn
import timm

# get example histology image
img = Image.open(
  urlopen(
    "https://github.com/owkin/HistoSSLscaling/raw/main/assets/example.tif"
  )
)

# load model from the hub
model = timm.create_model(
  model_name="hf-hub:1aurent/densenet121.tiatoolbox-kather100k",
  pretrained=True,
  num_classes=0,
).eval()

# get model specific transforms (normalization, resize)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

data = transforms(img).unsqueeze(0) # input is a (batch_size, num_channels, img_size, img_size) shaped tensor
output = model(data)  # output is a (batch_size, num_features) shaped tensor

Citation

@article{Pocock2022,
  author    = {Pocock, Johnathan and Graham, Simon and Vu, Quoc Dang and Jahanifar, Mostafa and Deshpande, Srijay and Hadjigeorghiou, Giorgos and Shephard, Adam and Bashir, Raja Muhammad Saad and Bilal, Mohsin and Lu, Wenqi and Epstein, David and Minhas, Fayyaz and Rajpoot, Nasir M and Raza, Shan E Ahmed},
  doi       = {10.1038/s43856-022-00186-5},
  issn      = {2730-664X},
  journal   = {Communications Medicine},
  month     = {sep},
  number    = {1},
  pages     = {120},
  publisher = {Springer US},
  title     = {{TIAToolbox as an end-to-end library for advanced tissue image analytics}},
  url       = {https://www.nature.com/articles/s43856-022-00186-5},
  volume    = {2},
  year      = {2022}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · timm · image-classification

Можно запустить

Подбираем GPU…

Ревизия весов
f0b1568

0 моделей