/ Модель

Характеристики

Базовая модель
Huihui-Qwen3.5-35B-A3B-abliterated
Опубликована
27 фев 2026

Huihui-Qwen3.5-35B-A3B-abliterated-MXFP4_MOE-GGUF

Изображение и текст → текст3 профессии

Локальная GGUF-сборка мультимодальной Huihui-Qwen3.5 для диалога и анализа изображений.

463скачиваний за 30 дней12лайковвеса обновлены3 мар 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Это GGUF-сборка модели Huihui-Qwen3.5-35B-A3B-abliterated, опубликованная noctrex. Она предназначена для локального диалога и анализа изображений; метаданные указывают поддержку vision и chat. Вариант использует MXFP4 для тензоров MoE, а остальные тензоры хранит в BF16, чтобы сохранить их исходную точность. Для запуска автор рекомендует актуальную версию llama.cpp; для файла mmproj рекомендуется вариант F32. В репозитории также доступны варианты BF16, F16 и F32 GGUF, причём автор указывает порядок качества F32, BF16, F16.

Модель основана на Huihui-Qwen3.5-35B-A3B-abliterated — мультимодальной версии Qwen3.5 с ослабленными отказами. Она подходит для общения с изображениями и другими сценариями визуального анализа. Указанный формат оптимизирован для локального запуска, но на некоторых архитектурах BF16 может работать медленнее. Условия лицензии в предоставленных данных не описаны.

Сценарии применения

  • ответы на вопросы по загруженным изображениям
  • описание содержимого фотографии
  • визуальный анализ изображений в диалоге
  • локальный мультимодальный чат

Ограничения

Для запуска требуется актуальная версия llama.cpp; на некоторых архитектурах BF16 может быть медленнее. Лицензия не указана в предоставленных данных.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

These are quantizations of the model Huihui-Qwen3.5-35B-A3B-abliterated

  • Download the latest llama.cpp to use these quantizations.
  • For the mmproj file, the F32 version is recommended for best results.
  • Order of quality: F32 > BF16 > F16

Read the guide from unsloth in order to set up the model's recommended settings:
Qwen3.5 - How to Run Locally Guide

The mainline standard is to use MXFP4 for the MoE tensors, and Q8 for the rest.
So I created a new variant, where the other tensors are BF16 instead of Q8.
On some architectures BF16 will be slower, but its the highest quality, essentialy its the original tensors from the model copied over unquantized.

As of 2026-03-03 the chat template has been updated, and is using the fixed version from unsloth.
If you don't want to download the model again, you can just update the chat template.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

GGUF-веса поддерживаются только для текстовых LLM (llama.cpp).

Ревизия весов
035c3b2

0 моделей