/ Модель

Характеристики

Контекст
131 072 токена
Параметры
7,5 млрд
Размер весов
16,7 ГБ
Лицензия
CC BY-NC-SA 4.0
Архитектура
llava_llama · dense
Базовая модель
Llama-3.1-8B-Instruct
Опубликована
15 дек 2024

BiMediX2-8B-Bi

Генерация текстаТекст → текст3 профессии

Мультимодальная медицинская модель MBZUAI для ответов на вопросы по изображениям и тексту в биомедицинских диалогах.

87скачиваний за 30 дней0лайковвеса обновлены15 дек 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

BiMediX2-8B-Bi — мультимодальная медицинская модель семейства LLaVA-LLaMA, разработанная MBZUAI на основе дообучения meta-llama/Llama-3.1-8B-Instruct. Модель принимает изображения и текст и генерирует текстовые ответы; её назначение — диалоговые сценарии в биомедицине и здравоохранении. В метаданных указаны 7,5 млрд параметров, контекст до 131 072 токенов и поддержка английского и арабского языков.

Модель подходит для вопросов по медицинским изображениям и текстовым описаниям, а также для диалоговой помощи в медицинских и биологических задачах. Репозиторий содержит веса в формате safetensors. Лицензия CC BY-NC-SA 4.0 допускает использование с указанием авторства и на условиях распространения производных материалов по той же лицензии, но запрещает коммерческое использование.

Ответы модели не следует считать медицинским диагнозом или заменой оценки специалиста: метаданные не подтверждают клиническую валидацию. README в предоставленных данных содержит только заголовок, поэтому подробности обучения и результаты оценки установить нельзя.

Сценарии применения

  • ответы на вопросы по медицинским изображениям
  • объяснение биомедицинских изображений по текстовому запросу
  • диалоговая помощь по вопросам здравоохранения на английском и арабском
  • обсуждение биологических тем в формате чата

Ограничения

Модель не следует использовать как замену клинической оценки специалиста; клиническая валидация в предоставленных данных не подтверждена. Лицензия CC BY-NC-SA 4.0 запрещает коммерческое использование.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

BiMediX2 : Bio-Medical EXpert LMM for Diverse Medical Modalities

BiMediX2-8B Bilingual Model

Mohamed Bin Zayed University of Artificial Intelligence (MBZUAI), UAE

Website Paper License

License & Citation

BiMediX2 is released under the CC-BY-NC-SA 4.0 License. For more details, please refer to the LICENSE file included in our BiMediX repository.

⚠️ Warning! This release, intended for research, is not ready for clinical or commercial use.

Users are urged to employ BiMediX2 responsibly, especially when applying its outputs in real-world medical scenarios. It is imperative to verify the model's advice with qualified healthcare professionals and not rely on it for medical diagnoses or treatment decisions. Despite the overall advancements BiMediX2 shares common challenges with other language models, including hallucinations, toxicity, and stereotypes. BiMediX2's medical diagnoses and recommendations are not infallible.

If you use BiMediX2 in your research, please cite our work as follows:

@misc{mullappilly2024bimedix2biomedicalexpertlmm,
      title={BiMediX2: Bio-Medical EXpert LMM for Diverse Medical Modalities}, 
      author={Sahal Shaji Mullappilly and Mohammed Irfan Kurpath and Sara Pieri and Saeed Yahya Alseiari and Shanavas Cholakkal and Khaled Aldahmani and Fahad Khan and Rao Anwer and Salman Khan and Timothy Baldwin and Hisham Cholakkal},
      year={2024},
      eprint={2412.07769},
      archivePrefix={arXiv},
      primaryClass={cs.CV},
      url={https://arxiv.org/abs/2412.07769}, 
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

Архитектура llava_llama неизвестна transformers в образе рантайма.

Класс архитектуры
LlavaLlamaForCausalLM
Ревизия весов
45dd88e

0 моделей