/ Модель

Характеристики

Лицензия
Apache 2.0
Архитектура
qwen2_vl · dense
Базовая модель
Qwen2-VL-OCR-2B-Instruct
Библиотека
transformers
Опубликована
15 мая 2025

Qwen2-VL-OCR-2B-Instruct-GGUF

Изображение и текст → текст11 профессий

Qwen2-VL-OCR-2B-Instruct-GGUF — мультимодальная модель для преобразования изображений в текст, разработанная как дообученная версия Qwen/Qwen2-VL-2B-Instruct и опубликованная пользователем или организацией prithivMLmods.

1 070скачиваний за 30 дней4лайкавеса обновлены15 мая 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Она сочетает визуальное и текстовое понимание с диалоговым взаимодействием и предназначена прежде всего для OCR, распознавания небрежного рукописного текста, анализа изображений, решения математических задач и вывода формул в формате LaTeX. Модель поддерживает сценарии image-to-text и VQA, а также задачи, связанные с кодом. В метаданных указан английский язык.

Модель имеет размер 2B параметров согласно названию базовой модели и распространяется в формате GGUF с вариантами от FP16 до низкоразрядных квантований Q2–Q8 и i1/IQ. Это позволяет выбирать между качеством, скоростью и требованиями к памяти, однако README не содержит количественных оценок качества, сведений о длине контекста, точном наборе поддерживаемых языков и ограничениях распознавания. Лицензия — Apache-2.0; условия конкретного запуска зависят от совместимого программного обеспечения для GGUF.

Для каких профессий подходит11

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Qwen2-VL-OCR-2B-Instruct-GGUF [ VL / OCR ]

The Qwen2-VL-OCR-2B-Instruct model is a fine-tuned version of Qwen/Qwen2-VL-2B-Instruct, tailored for tasks that involve Optical Character Recognition (OCR), image-to-text conversion, math problem solving with LaTeX formatting and Messy Handwriting OCR. This model integrates a conversational approach with visual and textual understanding to handle multi-modal tasks effectively.


Model Files (Qwen2-VL-OCR-2B-Instruct, GGUF)

File NameSizeQuantizationFormatDescription
Qwen2-VL-OCR-2B-Instruct.f16.gguf3.09 GBFP16GGUFFull precision (float16)
Qwen2-VL-OCR-2B-Instruct.Q2_K.gguf676 MBQ2_KGGUF2-bit quantized
Qwen2-VL-OCR-2B-Instruct.Q3_K_L.gguf880 MBQ3_K_LGGUF3-bit quantized (K L variant)
Qwen2-VL-OCR-2B-Instruct.Q3_K_M.gguf824 MBQ3_K_MGGUF3-bit quantized (K M variant)
Qwen2-VL-OCR-2B-Instruct.Q3_K_S.gguf761 MBQ3_K_SGGUF3-bit quantized (K S variant)
Qwen2-VL-OCR-2B-Instruct.Q4_K_M.gguf986 MBQ4_K_MGGUF4-bit quantized (K M variant)
Qwen2-VL-OCR-2B-Instruct.Q4_K_S.gguf940 MBQ4_K_SGGUF4-bit quantized (K S variant)
Qwen2-VL-OCR-2B-Instruct.Q5_K_M.gguf1.13 GBQ5_K_MGGUF5-bit quantized (K M variant)
Qwen2-VL-OCR-2B-Instruct.Q5_K_S.gguf1.1 GBQ5_K_SGGUF5-bit quantized (K S variant)
Qwen2-VL-OCR-2B-Instruct.Q6_K.gguf1.27 GBQ6_KGGUF6-bit quantized
Qwen2-VL-OCR-2B-Instruct.Q8_0.gguf1.65 GBQ8_0GGUF8-bit quantized

i1 Quantized Variants

File NameSizeQuantizationDescription
Qwen2-VL-OCR-2B-Instruct.i1-IQ1_M.gguf464 MBi1-IQ1_Mi1 1-bit medium
Qwen2-VL-OCR-2B-Instruct.i1-IQ1_S.gguf437 MBi1-IQ1_Si1 1-bit small
Qwen2-VL-OCR-2B-Instruct.i1-IQ2_M.gguf601 MBi1-IQ2_Mi1 2-bit medium
Qwen2-VL-OCR-2B-Instruct.i1-IQ2_S.gguf564 MBi1-IQ2_Si1 2-bit small
Qwen2-VL-OCR-2B-Instruct.i1-IQ2_XS.gguf550 MBi1-IQ2_XSi1 2-bit extra small
Qwen2-VL-OCR-2B-Instruct.i1-IQ2_XXS.gguf511 MBi1-IQ2_XXSi1 2-bit extra extra small
Qwen2-VL-OCR-2B-Instruct.i1-IQ3_M.gguf777 MBi1-IQ3_Mi1 3-bit medium
Qwen2-VL-OCR-2B-Instruct.i1-IQ3_S.gguf762 MBi1-IQ3_Si1 3-bit small
Qwen2-VL-OCR-2B-Instruct.i1-IQ3_XS.gguf732 MBi1-IQ3_XSi1 3-bit extra small
Qwen2-VL-OCR-2B-Instruct.i1-IQ3_XXS.gguf669 MBi1-IQ3_XXSi1 3-bit extra extra small
Qwen2-VL-OCR-2B-Instruct.i1-IQ4_NL.gguf936 MBi1-IQ4_NLi1 4-bit with no-layernorm quantization
Qwen2-VL-OCR-2B-Instruct.i1-IQ4_XS.gguf896 MBi1-IQ4_XSi1 4-bit extra small
Qwen2-VL-OCR-2B-Instruct.i1-Q4_0.gguf938 MBi1-Q4_0i1 4-bit traditional quant
Qwen2-VL-OCR-2B-Instruct.i1-Q4_1.gguf1.02 GBi1-Q4_1i1 4-bit traditional variant

Metadata

File NameSizeDescription
.gitattributes3.37 kBGit LFS tracking file
config.json34 BConfig placeholder
README.md672 BModel readme

Quants Usage

(sorted by size, not necessarily quality. IQ-quants are often preferable over similar sized non-IQ quants)

LinkTypeSize/GBNotes
GGUFQ2_K0.4
GGUFQ3_K_S0.5
GGUFQ3_K_M0.5lower quality
GGUFQ3_K_L0.5
GGUFIQ4_XS0.6
GGUFQ4_K_S0.6fast, recommended
GGUFQ4_K_M0.6fast, recommended
GGUFQ5_K_S0.6
GGUFQ5_K_M0.7
GGUFQ6_K0.7very good quality
GGUFQ8_00.9fast, best quality
GGUFf161.616 bpw, overkill

Here is a handy graph by ikawrakow comparing some lower-quality quant types (lower is better):

image.png

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Нельзя запустить

GGUF-веса поддерживаются только для текстовых LLM (llama.cpp).

Ревизия весов
8814b60

0 моделей