/ Модель

Характеристики

Контекст
131 072 токена
Лицензия
Apache 2.0
Архитектура
mllama · dense
Базовая модель
Llama-3.2-11B-Vision-Instruct
Опубликована
2 фев 2025

llama3.2-medical-visualqa-11B

Вопросы по изображениюИзображение, текст → текст3 профессии

Дообученная Llama 3.2 Vision отвечает на текстовые вопросы по радиологическим снимкам и изображениям кожи.

15скачиваний за 30 дней5лайковвеса обновлены2 фев 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Изображение → текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

dumbequation/Llama3.2-medical-visualqa-11B — дообученная мультимодальная модель на базе unsloth/Llama-3.2-11B-Vision-Instruct. Она предназначена для ответов на вопросы по медицинским изображениям, в частности снимкам радиологии и изображениям кожи, связанным с раком кожи. Модель принимает изображения и текстовые вопросы и формирует текстовые ответы; в карточке также указан диалоговый интерфейс. Репозиторий содержит веса в формате safetensors, лицензия — Apache-2.0. В README автор рекомендует параметры min_p=0.1 и temperature=1.5.

Модель ориентирована на медицинские сценарии визуального вопросно-ответного поиска, включая вопросы о КТ грудной клетки и изображениях кожи. Карточка не описывает клиническую валидацию и не приводит ограничений по точности, поэтому ответы не следует считать подтверждённым медицинским диагнозом.

Сценарии применения

  • ответы на вопросы по КТ грудной клетки
  • описание находок на медицинских радиологических снимках
  • ответы на вопросы по изображениям кожи
  • исследовательский анализ медицинских изображений

Ограничения

Карточка не сообщает о клинической валидации или точности модели; её ответы не следует использовать как самостоятельный медицинский диагноз. Данные обучения описаны для радиологических и кожных изображений, поэтому пригодность для иных медицинских изображений не подтверждена.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Llama3.2 11B vision model fine-tuned medical dataset containing pictures and conversations on radiology and skin cancer images.

Best used with - min_p = 0.1 and temperature = 1.5

Examples

image/png

Question: What does the HRCT of the thorax show?

Answer: The HRCT shows diffuse irregular linear and reticular pattern with multiple tiny nodules in a reticular pattern, compatible with interstitial lung disease.

Question: Which interstitial lung disease is it?

Answer: It is UIP, which is also known as fibrotic interstitial pneumonia.

Question: What is the prognosis for a patient with definite UIP pattern on HRCT?

Answer: The prognosis for a patient with definite UIP pattern on HRCT is generally poor, with median survival ranging from 2 to 5 years after the onset of symptoms.

Question: Is there any treatment available for a patient with UIP pattern? Answer: Unfortunately, there is no cure for UIP pattern. Treatment options are limited and focused on managing symptoms and slowing disease progression.

Uploaded finetuned model

  • Developed by: dumbequation
  • License: apache-2.0
  • Finetuned from model : unsloth/Llama-3.2-11B-Vision-Instruct

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
MllamaForConditionalGeneration
Ревизия весов
1a582e5

0 моделей