Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
AvoCahDoe/llava-1.5-13b-rlmpq-aggressive — производная мультимодальная чат-модель на архитектуре LLaVA 1.5, основанная на llava-hf/llava-1.5-13b-hf. Она принимает изображения и текстовые инструкции, чтобы отвечать на вопросы о содержимом изображений и описывать их. В репозитории представлены артефакты оценки варианта RL-MPQ Aggressive со средним уровнем 3,75 бита; метаданные указывают формат safetensors и библиотеку Transformers.
В сравнении README вариант RL-MPQ Aggressive получил средний результат 56,22 на наборах MMMU, MMBench и ScienceQA против 56,78 у FP16-базовой модели и 56,16 у INT4-варианта. Это результаты указанного сравнения, а не гарантия качества на других данных. Лицензия в метаданных обозначена как other; условия использования следует проверять в карточке модели и лицензии базовой модели.
Сценарии применения
ответы на вопросы о содержимом изображения
описание изображений по текстовому запросу
визуальный диалог с изображением
оценка мультимодальной модели на MMMU, MMBench и ScienceQA
Ограничения
README описывает артефакты оценки и приводит результаты только на MMMU, MMBench и ScienceQA; они не гарантируют качество в других сценариях. Лицензия указана как other, поэтому условия использования нужно проверить отдельно.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель