/ Модель

Характеристики

Контекст
262 144 токена
Размер весов
6,5 ГБ
Лицензия
Apache 2.0
Архитектура
qwen3_5 · dense
Базовая модель
Qwen3.5-9B
Библиотека
mlx
Опубликована
19 мар 2026

Qwen3.5-VL-9B-JANG_4S-CRACK

Изображение и текст → текст4 профессии

Квантованная мультимодальная версия Qwen3.5-9B для диалога и анализа изображений на Apple Silicon с ослабленными защитными отказами.

922скачиваний за 30 дней12лайковвеса обновлены8 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Qwen3.5-VL-9B-JANG_4S-CRACK — мультимодальная модель на 9 млрд параметров, созданная Jinho Jang на основе Qwen/Qwen3.5-9B. Это плотная гибридная архитектура SSM и Attention с 32 слоями и поддержкой анализа изображений и диалога. Модель предназначена для ответов на вопросы по изображениям и текстового общения; в карточке также заявлен интерфейс для вызова инструментов.

Веса переведены в смешанный формат JANG_4S для Apple Silicon: 6-битное квантование Attention и 4-битное MLP, объём около 6 ГБ. Автор также применил CRACK — изменение весов, направленное на удаление отказов по безопасности. Карточка сообщает результаты MMLU 70,8% и HarmBench 72,5%; эти показатели приведены как результаты автора и не гарантируют качество на других задачах. Для запуска заявлена поддержка MLX Studio и пакета jang-tools; лицензия — Apache-2.0. Удаление защитных отказов повышает риск выдачи вредоносных ответов.

Сценарии применения

  • ответы на вопросы по содержимому изображений
  • описание и анализ изображений в диалоге
  • текстовый чат с поддержкой изображений
  • эксперименты с вызовом инструментов в мультимодальном чате

Ограничения

Квантование и изменение весов могут снизить качество; в приведённом тесте MMLU результат ниже базовой версии на 1,5 процентного пункта. Удаление защитных отказов может приводить к выдаче вредоносных ответов; запуск JANG заявлен для MLX Studio и jang-tools.

Для каких профессий подходит4

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Important: This model uses the JANG quantization format — the GGUF equivalent for MLX on Apple Silicon. Currently only supported by MLX Studio and the jang-tools Python package.



Qwen 3.5 VL 9B — JANG_4S + CRACK

JANG mixed-precision · CRACK abliterated · Vision-Language · No guardrails · 6 GB


What Is This?

This is Qwen 3.5 VL 9B — a 9B parameter dense hybrid SSM/Attention model with built-in vision capabilities.

It has been:

  1. JANG quantized — JANG_4S profile (6-bit attention, 4-bit MLP) — 6 GB
  2. CRACK abliterated — permanent weight-level removal of safety refusal
ArchitectureQwen 3.5 VL Dense — 9B params, hybrid SSM/FA, 32 layers
QuantizationJANG_4S (6/4-bit mixed) — 6 GB
AbliterationCRACK — novel weight surgery
HarmBench72.5% (232/320)
MMLU70.8% (base: 72.3%, -1.5%)
Speed~80 tok/s (M4 Max)
VisionYes — via MLX Studio / vMLX
ThinkingON/OFF supported
Fits on16 GB+ Macs

JANG vs MLX Uniform Quantization

ModelMMLUSizeNotes
JANG_4S + CRACK70.8%6 GBThis model
JANG_4S (base)73.0%6 GBUnmodified JANG
MLX 4-bit72.5%4.7 GBUniform quant

HarmBench Results

232/320 (72.5%) — tested with enable_thinking=false, temperature=1.0

CategoryScore
Misinformation / Disinfo46/5485%
Cybercrime / Intrusion41/5279%
Chemical / Biological31/4274%
Harmful13/1872%
Illegal38/5372%
Copyright53/8066%
Harassment / Bullying10/2148%

Note: Dense models have stronger distributed safety training than MoE models. This model prioritizes knowledge preservation over maximum compliance.


MMLU Results

CRACKBaseDelta
Total46/65 (70.8%)47/65 (72.3%)-1.5%

Install & Usage

pip install "jang[mlx]"
from jang_tools.loader import load_jang_model
from mlx_lm import generate

model, tokenizer = load_jang_model("dealignai/Qwen3.5-VL-9B-JANG_4S-CRACK")

messages = [{"role": "user", "content": "Your prompt here"}]
prompt = tokenizer.apply_chat_template(
    messages, add_generation_prompt=True, tokenize=False)

response = generate(model, tokenizer, prompt=prompt, max_tokens=2000)
print(response)

Thinking Mode

Thinking is ON by default. To disable:

prompt = tokenizer.apply_chat_template(
    messages, add_generation_prompt=True,
    enable_thinking=False, tokenize=False)

Tip: Use temperature=1.0 for chat. Use temperature=0.0 for structured tasks like MMLU.


About JANG

JANG (Jang Adaptive N-bit Grading) is a mixed-precision quantization format for Apple Silicon — the GGUF equivalent for MLX.

About CRACK

CRACK (Controlled Refusal Ablation via Calibrated Knockouts) removes safety alignment from LLMs at the weight level using per-layer projected vectors from 512 structurally-mirrored prompt pairs.


Links


Disclaimer

This model is provided for research and educational purposes. The creators are not responsible for any misuse. By downloading this model, you agree to use it responsibly and in compliance with applicable laws.


한국어

Qwen 3.5 VL 9B — JANG_4S + CRACK

항목내용
크기6 GB
HarmBench72.5% (232/320)
MMLU70.8% (기본 72.3% 대비 -1.5%)
비전지원 (MLX Studio / vMLX)
최소 요구사양16 GB 메모리 Mac
pip install "jang[mlx]"

GitHub · HuggingFace · MLX Studio · Ko-fi · X @dealignai


Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · mlx

Нельзя запустить

Репозиторий недоступен на Hugging Face.

Класс архитектуры
Qwen3_5ForConditionalGeneration
Ревизия весов
a92b7c0

0 моделей