/ Модель

Характеристики

Контекст
4 096 токенов
Параметры
6,6 млрд
Размер весов
14,3 ГБ
Лицензия
Apache 2.0
Архитектура
llava_llama · dense
Библиотека
transformers
Опубликована
10 мар 2025

GEM

Генерация текстаТекст → текст3 профессии

GEM — мультимодальная модель для интерпретации ЭКГ по сигналам, 12-канальным изображениям и тексту.

117скачиваний за 30 дней7лайковвеса обновлены12 мар 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

GEM — мультимодальная модель семейства LLaVA-LLaMA, предназначенная для интерпретации электрокардиограмм с опорой на данные ЭКГ и клинически согласованное рассуждение. Разработчик описывает её как языковую модель, объединяющую временные ряды ЭКГ, изображения 12-канальной ЭКГ и текст.

Модель предназначена для анализа ЭКГ и формулирования обоснованных интерпретаций с привязкой к признакам сигнала. Она принимает изображения и текст; заявлена работа с временными рядами ЭКГ, однако способ их подачи в карточке не уточнён. Архитектура — плотная LlavaLlamaForCausalLM на 6,6 млрд параметров; базовая длина контекста составляет 4096 токенов. Для работы используются Transformers и веса Safetensors.

Модель может помогать специалистам разбирать ЭКГ и получать клинически ориентированное объяснение диагностических признаков. Карточка не приводит метрик качества или подробностей валидации, поэтому надёжность интерпретаций по этим данным оценить нельзя. Лицензия — Apache-2.0.

Сценарии применения

  • интерпретация 12-канальной ЭКГ по изображению
  • анализ временного ряда ЭКГ
  • объяснение диагностических признаков ЭКГ
  • подготовка клинически ориентированного описания электрокардиограммы

Ограничения

В карточке не приведены метрики качества и подробности клинической валидации. Способ передачи временных рядов ЭКГ и перечень поддерживаемых языков не уточнены.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

GEM: Empowering MLLM for Grounded ECG Understanding with Time Series and Images

Introduction

GEM is a multimodal LLM unifying ECG time series, 12-lead ECG images and text for grounded and clinician-aligned ECG interpretation. GEM enables feature-grounded analysis, evidence-driven reasoning, and a clinician-like diagnostic process.

🔥 Updates

Project Page: 📖 Page

Paper: 📄 Arxiv

Code: 💻 GitHub

Model: 🤗 GEM

Data: 🤗 ECG-Grounding

Citation

If you find GEM helpful for your research and applications, please cite our paper:

@misc{lan2025gemempoweringmllmgrounded,
      title={GEM: Empowering MLLM for Grounded ECG Understanding with Time Series and Images}, 
      author={Xiang Lan and Feng Wu and Kai He and Qinghao Zhao and Shenda Hong and Mengling Feng},
      year={2025},
      eprint={2503.06073},
      archivePrefix={arXiv},
      primaryClass={cs.CL},
      url={https://arxiv.org/abs/2503.06073}, 
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Нельзя запустить

Архитектура llava_llama неизвестна transformers в образе рантайма.

Класс архитектуры
LlavaLlamaForCausalLM
Ревизия весов
69ae5d6

0 моделей