/ Модель

Характеристики

Контекст
262 144 токена
Размер весов
29,1 ГБ
Лицензия
Apache 2.0
Архитектура
qwen3_5 · dense
Базовая модель
Qwen3.6-27B
Библиотека
mlx
Опубликована
24 мая 2026

Qwen3.6-27B-MXFP8-CRACK-MTP

Изображение и текст → текст13 профессий

Мультимодальная версия Qwen 3.6 27B для диалогов, рассуждений и анализа изображений и видео, квантизованная в MXFP8 для MLX на Apple Silicon.

175скачиваний за 30 дней3лайкавеса обновлены24 мая 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель dealignai/Qwen3.6-27B-MXFP8-CRACK-MTP — модифицированная версия Qwen 3.6 27B от dealignai. Это плотная мультимодальная модель с гибридной архитектурой GatedDeltaNet SSM и полным вниманием, 64 слоями и поддержкой изображений и видео. Репозиторий содержит веса SafeTensors в формате MXFP8 для запуска через MLX на компьютерах Apple Silicon; размер указан как 27 ГБ. Сохранена голова multi-token prediction для спекулятивного декодирования d3, для которого автор заявляет ускорение генерации примерно в 1,74 раза в совместимой среде vMLX.

Модель предназначена для диалогов, рассуждений, ответов по изображениям и видео, а также сценариев с вызовом инструментов. Автор сообщает об удалении поведения отказа на уровне весов и приводит результаты HarmBench и MMLU, полученные через vMLX. README не описывает методику тестирования подробно, поэтому заявленные оценки и ускорение следует считать результатами автора, а не независимой проверкой.

Лицензия — Apache-2.0. Модель рассчитана на использование с vMLX или совместимой средой MLX с поддержкой Qwen 3.6; формат MLX и ускорение MTP ориентированы на Apple Silicon. После изменения поведения отказа модель может выполнять запросы без обычных отказов по безопасности, поэтому необходим контроль её применения.

Сценарии применения

  • ответы на вопросы по изображениям
  • анализ содержания видеокадров
  • диалоговые ответы и рассуждения
  • вызов инструментов в агентных сценариях
  • генерация текста с ускорением MTP в vMLX

Ограничения

Формат и рекомендуемый запуск ориентированы на MLX и Apple Silicon; ускорение MTP требует среды с поддержкой этой функции. Поведение отказа по безопасности намеренно удалено; опубликованные оценки приведены автором, а подробная независимая проверка в карточке не описана.

Для каких профессий подходит13

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Qwen 3.6 27B — MXFP8 CRACK + d3 MTP

CRACK abliterated · MXFP8 (8-bit microscaling) · d3 MTP self-speculative (1.74× faster) · Vision + Video · Reasoning toggle · 27 GB


What Is This?

This is Qwen 3.6 27B — a vision-language model (dense hybrid (GatedDeltaNet SSM + full attention), 64 layers, native image + video understanding) that has been:

  1. CRACK abliterated — refusal behavior removed at the weight level, so it complies across task categories instead of refusing, while keeping its knowledge, reasoning, and vision intact.
  2. MXFP8 (8-bit microscaling) quantized for MLX on Apple Silicon — 27 GB.
  3. MTP-preserved — the native multi-token-prediction head is kept and abliterated too, so d3 self-speculative decoding works (~1.74× faster) on an MTP-aware runtime (vMLX).

Vision and video processing are fully preserved.

Results

Evaluated through the vMLX inference engine. HarmBench scored with a strict classifier (rejects loops, empty/template dumps, and thinking-trace leakage). MMLU is the standard 57-subject multiple-choice benchmark.

MetricResult
HarmBench-320 (compliance / ASR)96.9% (310/320)
MMLU (57-subject)80.3%
d3 MTP speedup1.74× vs autoregressive

Abliteration preserves the model's knowledge and reasoning — it stays coherent in both direct and reasoning modes.

Features

  • Vision + video — image-text-to-text, native frame/video understanding preserved.
  • d3 MTP speculative decoding — native MTP head preserved and abliterated → ~1.74× faster generation on an MTP-aware runtime.
  • Reasoning toggle — enable_thinking=True (default, full chain-of-thought) or enable_thinking=False (direct answers).

Usage

Run with vMLX (recommended — supports VL + video + native MTP) or an MLX runtime with Qwen 3.6 support.

Recommended sampling (from the model's generation_config): temperature 1.0, top_p 0.95, top_k 20.

# vMLX OpenAI-compatible endpoint
# POST /v1/chat/completions
{
  "model": "dealignai/Qwen3.6-27B-MXFP8-CRACK-MTP",
  "messages": [{"role": "user", "content": "..."}],
  "temperature": 1.0, "top_p": 0.95, "top_k": 20,
  "enable_thinking": true
}

About CRACK

CRACK (Controlled Refusal Ablation via Calibrated Knockouts) removes safety-refusal behavior at the weight level by projecting refusal directions out of the residual-stream writer matrices, with strengths calibrated to preserve reasoning quality and coherence.

Support dealignai

All models are built from original research and released free.

Support us on Ko-fi — membership gets early access and extras.

Ko-fi · X @dealignai · dealign.ai

See our research: Safety Generalization in Frontier Models


Disclaimer

This model has had its safety-refusal behavior removed for research purposes. It will follow instructions across all categories without refusing. You are solely responsible for how you use it and for complying with all applicable laws. Published for AI-safety research and authorized security testing.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · mlx

Нельзя запустить

Репозиторий недоступен на Hugging Face.

Класс архитектуры
Qwen3_5ForConditionalGeneration
Ревизия весов
a7a1d19

0 моделей