Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
AvoCahDoe/llava-1.5-13b-rlmpq-balanced — производная мультимодальная чат-модель на архитектуре LLaVA, созданная на базе llava-hf/llava-1.5-13b-hf с применением экспериментального RL-MPQ fake-quantization. В README указан сценарий Balanced и средняя точность представления 4,4 бита; репозиторий также содержит артефакты сравнительной оценки на наборах MMMU, MMBench и ScienceQA.
Модель предназначена для диалога по изображениям: она принимает изображение и текстовую инструкцию, а генерирует текстовый ответ. Базовая LLaVA 1.5 13B ориентирована на ответы на вопросы и описание изображений. Доступная таблица сравнивает FP16, bitsandbytes INT4 NF4 и вариант RL-MPQ Aggressive, но не приводит отдельные результаты для Balanced, поэтому качество именно этой версии по ней оценить нельзя. Лицензия в метаданных указана как other; конкретные условия следует проверять в репозитории базовой модели и карточке модели.
Сценарии применения
ответы на вопросы об изображениях
описание содержимого изображений
диалог по визуальным материалам
оценка влияния низкой разрядности на качество VLM
Ограничения
README не приводит отдельные метрики для сценария Balanced, поэтому его качество по указанным сравнительным результатам установить нельзя. Лицензия обозначена как other, а конкретные условия использования требуют проверки.
Карточка модели
README от автора на Hugging Face, как он его опубликовал