/ Модель

Характеристики

Контекст
128 000 токенов
Параметры
32 млрд
Размер весов
19,8 ГБ
Лицензия
Apache 2.0
Архитектура
qwen2_5_vl · dense
Библиотека
transformers
Опубликована
24 мар 2025

Qwen2.5-VL-32B-Instruct-4bit

Изображение и текст → текст8 профессий

Квантованная 4-битная мультимодальная модель Qwen2.5-VL на 32 млрд параметров для генерации текста по изображениям и текстовым инструкциям.

528скачиваний за 30 дней4лайкавеса обновлены26 мар 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Qwen2.5-VL-32B-Instruct-4bit — мультимодальная instruction-tuned модель семейства Qwen2.5-VL, разработанная командой Qwen и преобразованная сообществом mlx-community в формат MLX с помощью mlx-vlm. Модель содержит 32 млрд параметров и использует 4-битное квантование; работать с ней можно через библиотеку Transformers и инструменты MLX.

Модель предназначена для обработки изображений вместе с текстовыми запросами: описания изображений, визуального вопросно-ответного диалога, извлечения и интерпретации информации с изображений. В метаданных заявлена поддержка английского языка, контекстное окно составляет 128 000 токенов. Pipeline-модель — image-text-to-text.

К сильным сторонам относятся мультимодальное понимание и большой контекст, а 4-битное представление может снизить требования к памяти при локальном запуске. Квантование может повлиять на точность по сравнению с полной версией модели, а заявленная языковая поддержка ограничена английским. Модель распространяется по лицензии Apache-2.0.

Сценарии применения

  • описание содержимого изображений
  • ответы на вопросы по изображениям
  • извлечение текста и данных с изображений
  • анализ визуальных документов
  • мультимодальный диалог на английском языке

Ограничения

4-битное квантование может снижать точность по сравнению с полноразмерной версией модели. Заявленная языковая поддержка ограничена английским языком.

Для каких профессий подходит8

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

mlx-community/Qwen2.5-VL-32B-Instruct-4bit

This model was converted to MLX format from Qwen/Qwen2.5-VL-32B-Instruct using mlx-vlm version 0.1.21. Refer to the original model card for more details on the model.

Use with mlx

pip install -U mlx-vlm
python -m mlx_vlm.generate --model mlx-community/Qwen2.5-VL-32B-Instruct-4bit --max-tokens 100 --temperature 0.0 --prompt "Describe this image." --image <path_to_image>

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Нельзя запустить

MLX-модели работают только на Apple Silicon.

Класс архитектуры
Qwen2_5_VLForConditionalGeneration
Ревизия весов
926bd4b

0 моделей