/ Модель

Характеристики

Контекст
262 144 токена
Размер весов
3,2 ГБ
Лицензия
Apache 2.0
Архитектура
qwen3_5 · dense
Базовая модель
Qwen3.5-4B
Библиотека
mlx
Опубликована
19 мар 2026

Qwen3.5-VL-4B-JANG_4S-CRACK

Изображение и текст → текст6 профессий

Мультимодальная версия Qwen3.5-VL-4B в формате JANG с изменёнными весами CRACK для диалога и понимания изображений на Apple Silicon.

477скачиваний за 30 дней9лайковвеса обновлены8 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

dealignai публикует вариант Qwen3.5-VL-4B для Apple Silicon. Это плотная мультимодальная модель с гибридной архитектурой SSM и Attention, 32 слоями и возможностью понимать изображения и вести диалог. Модель дообучена на базе Qwen/Qwen3.5-4B, затем преобразована в смешанный формат JANG_4S: 6-битные веса Attention и 4-битные веса MLP; заявленный размер — около 3 ГБ. Для запуска README указывает MLX Studio и пакет jang-tools; также рекомендует vMLX.

Вариант CRACK прошёл изменение весов, направленное на удаление отказов в ответе. README приводит результаты MMLU и HarmBench, но это результаты авторских тестов, а не независимая оценка. Такая настройка может допускать небезопасные ответы. Модель предназначена для диалога и анализа изображений; метаданные также отмечают интерфейс вызова инструментов. Лицензия — Apache-2.0.

Сценарии применения

  • ответы на вопросы по изображению
  • диалог с визуальным помощником
  • описание содержимого изображений
  • анализ изображений с вызовом инструментов

Ограничения

Квантизация JANG рассчитана на экосистему MLX и, согласно README, поддерживается MLX Studio и jang-tools. Вариант CRACK удаляет защитные отказы и может выдавать небезопасные ответы; приведённые оценки основаны на тестах авторов.

Для каких профессий подходит6

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Important: This model uses the JANG quantization format — the GGUF equivalent for MLX on Apple Silicon. Currently only supported by MLX Studio and the jang-tools Python package.



Qwen 3.5 VL 4B — JANG_4S + CRACK

JANG mixed-precision · CRACK abliterated · Vision-Language · No guardrails · 3 GB


What Is This?

This is Qwen 3.5 VL 4B — a 4B parameter dense hybrid SSM/Attention model with built-in vision capabilities. The smallest model in the Qwen 3.5 family that still delivers solid performance.

It has been:

  1. JANG quantized — JANG_4S profile (6-bit attention, 4-bit MLP) — 3 GB
  2. CRACK abliterated — permanent weight-level removal of safety refusal
ArchitectureQwen 3.5 VL Dense — 4B params, hybrid SSM/FA, 32 layers
QuantizationJANG_4S (6/4-bit mixed) — 3 GB
AbliterationCRACK — novel weight surgery
HarmBench91.2% (292/320)
MMLU63.1% (base: 56.9%, +6.2% improvement)
Compliance8/8
Speed134 tok/s (M4 Max)
VisionYes — via MLX Studio / vMLX
ThinkingON/OFF supported
Fits on8 GB+ Macs

JANG vs MLX Uniform Quantization

ModelMMLUSizeSpeedNotes
JANG_4S + CRACK63.1%3 GB134 tok/sThis model
JANG_4S (base)67.5%3 GB134 tok/sUnmodified JANG
MLX 4-bit67.0%2.2 GB~100 tok/sUniform quant

HarmBench Results

292/320 (91.2%) — tested with enable_thinking=false, temperature=1.0

CategoryScore
Chemical / Biological41/4298%
Cybercrime / Intrusion51/5298%
Misinformation / Disinfo50/5493%
Illegal49/5392%
Harmful16/1889%
Copyright68/8085%
Harassment / Bullying17/2181%

MMLU Results

Surgery improved the model's reasoning — safety guardrails were interfering with knowledge retrieval.

CRACKBaseDelta
Total41/65 (63.1%)37/65 (56.9%)+6.2%

Install & Usage

pip install "jang[mlx]"
from jang_tools.loader import load_jang_model
from mlx_lm import generate

model, tokenizer = load_jang_model("dealignai/Qwen3.5-VL-4B-JANG_4S-CRACK")

messages = [{"role": "user", "content": "Your prompt here"}]
prompt = tokenizer.apply_chat_template(
    messages, add_generation_prompt=True, tokenize=False)

response = generate(model, tokenizer, prompt=prompt, max_tokens=2000)
print(response)

Thinking Mode

Thinking is ON by default. To disable:

prompt = tokenizer.apply_chat_template(
    messages, add_generation_prompt=True,
    enable_thinking=False, tokenize=False)

Tip: Use temperature=1.0 for chat. Use temperature=0.0 for structured tasks like MMLU.


About JANG

JANG (Jang Adaptive N-bit Grading) is a mixed-precision quantization format for Apple Silicon — the GGUF equivalent for MLX.

About CRACK

CRACK (Controlled Refusal Ablation via Calibrated Knockouts) removes safety alignment from LLMs at the weight level using per-layer projected vectors from 512 structurally-mirrored prompt pairs.


Links


Disclaimer

This model is provided for research and educational purposes. The creators are not responsible for any misuse. By downloading this model, you agree to use it responsibly and in compliance with applicable laws.


한국어

Qwen 3.5 VL 4B — JANG_4S + CRACK

항목내용
크기3 GB
HarmBench91.2% (292/320)
MMLU63.1% (기본 56.9% 대비 +6.2%)
속도134 tok/s (M4 Max)
비전지원 (MLX Studio / vMLX)
최소 요구사양8 GB 메모리 Mac
pip install "jang[mlx]"

GitHub · HuggingFace · MLX Studio · Ko-fi · X @dealignai


Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · mlx

Нельзя запустить

Репозиторий недоступен на Hugging Face.

Класс архитектуры
Qwen3_5ForConditionalGeneration
Ревизия весов
6a230a1

0 моделей