Характеристики

Контекст: 77 токенов
Лицензия: CC BY-NC 4.0
Архитектура: clip · dense
Опубликована: 11 мар 2024

Ссылки

XrayCLIPvit-b-16laion2b-s34b-b88k

Классификация изображений без дообученияИзображение, текст → label

Производная модели StanfordAIMI/XraySigLIP__vit-l-16-siglip-384__webli. Stanford AIMI әзірлеген XraySigLIP кеуде рентгендерін мәтіндік санаттармен салыстырып, zero-shot жіктеу үшін қолданылады.

126скачиваний за 30 дней4лайкавеса обновлены12 янв 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Карточка модели StanfordAIMI/XrayCLIP__vit-b-16__laion2b-s34b-b88k на Hugging Face совпадает с карточкой StanfordAIMI/XraySigLIP__vit-l-16-siglip-384__webli, поэтому описание составлено по ней.

Stanford AIMI әзірлеген XraySigLIP — кеуде қуысының рентген суреттерін мәтіндік сипаттамалармен салыстыратын SigLIP негізіндегі zero-shot классификация моделі. Ол ViT-L/16 SigLIP-384 архитектурасына сүйенеді және сурет пен кандидат белгілер тізімін қабылдап, олардың сәйкестік бағаларын береді.

Модель рентген суреттерін еркін берілген мәтіндік санаттар бойынша алдын ала арнайы оқытусыз жіктеуге арналған; ол CheXagent жобасының құрамындағы модельдердің бірі. Hugging Face карточкасында шамамен 0,7 млрд параметр көрсетілген. Лицензиясы CC BY-NC 4.0, сондықтан коммерциялық қолдануға арналмаған.

Сценарии применения

кеуде рентгенін ықтимал белгілер бойынша жіктеу
рентген суреттерін еркін мәтіндік санаттармен салыстыру
рентген деректерін бастапқы сұрыптау
медициналық бейнелерді зерттеу прототиптерінде таңбалау

Ограничения

Бұл модель диагностикалық шешім қабылдауға арналмаған және оның клиникалық дәлдігі мен қауіпсіздігі карточкада кепілдендірілмейді. Лицензиясы CC BY-NC 4.0 болғандықтан коммерциялық пайдалануға шектеу қояды.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

✏️ Citation

@article{chexagent-2024,
  title={CheXagent: Towards a Foundation Model for Chest X-Ray Interpretation},
  author={Chen, Zhihong and Varma, Maya and Delbrouck, Jean-Benoit and Paschali, Magdalini and Blankemeier, Louis and Veen, Dave Van and Valanarasu, Jeya Maria Jose and Youssef, Alaa and Cohen, Joseph Paul and Reis, Eduardo Pontes and Tsai, Emily B. and Johnston, Andrew and Olsen, Cameron and Abraham, Tanishq Mathew and Gatidis, Sergios and Chaudhari, Akshay S and Langlotz, Curtis},
  journal={arXiv preprint arXiv:2401.12208},
  url={https://arxiv.org/abs/2401.12208},
  year={2024}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · zero-shot-image-classification

Можно запустить

Подбираем GPU…

Класс архитектуры: CLIPModel
Ревизия весов: 0a6f843