/ Модель

Характеристики

Базовая модель
Huihui-Qwen3-VL-8B-Thinking-abliterated
Опубликована
9 ноя 2025

Huihui-Qwen3-VL-8B-Thinking-abliterated-i1-GGUF

Изображение и текст → текст4 профессии

Huihui-Qwen3-VL-8B-Thinking-abliterated-i1-GGUF — набор квантованных версий мультимодальной модели Huihui-Qwen3-VL-8B-Thinking-abliterated, разработанный noctrex.

1 022скачиваний за 30 дней0лайковвеса обновлены9 ноя 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель предназначена для задач image-text-to-text, то есть обработки изображений и текста с генерацией текстовых ответов. Конкретные сценарии применения, поддерживаемые языки и максимальный размер контекста в README не указаны.

Модель основана на архитектуре Qwen3-VL и имеет размер 8B параметров; доступны варианты в формате GGUF для запуска через llama.cpp. Квантование выполнено с использованием imatrix, объединяющей данные combined_all_large и harmful.txt, чтобы учитывать особенности abliterated-версии базовой модели. README не содержит точного перечня уровней квантования, поэтому качество и требования к ресурсам зависят от выбранного файла. Для лучшего результата рекомендуется использовать максимально качественную квантовку и F32-версию файла mmproj, хотя также поддерживаются BF16 и F16.

Для работы требуется актуальная версия llama.cpp. Лицензия и условия распространения в README не указаны. Аблитерированный характер базовой модели может влиять на её поведение и ограничения безопасности; подробные сведения о сильных и слабых сторонах, производительности и допустимых сценариях использования не приведены.

Для каких профессий подходит4

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

These are quantizations of the model Huihui-Qwen3-VL-8B-Thinking-abliterated.

These quantizations were created using an imatrix merged from combined_all_large and harmful.txt to leverage the abliterated nature of the model.

For higher precision versions (which are not in an need for an imatrix), please refer to the main repository: noctrex/Huihui-Qwen3-VL-8B-Thinking-abliterated-GGUF

Usage Notes:

  • Download the latest llama.cpp to use these quantizations.
  • Try to use the best quality you can run.
  • For the mmproj file, the F32 version is recommended for best results (F32 > BF16 > F16).

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

GGUF-веса поддерживаются только для текстовых LLM (llama.cpp).

Ревизия весов
5e802a8

0 моделей