/ Модель

Характеристики

Контекст
262 144 токена
Параметры
1,9 млрд
Размер весов
12,6 ГБ
Лицензия
Своя лицензия
Архитектура
nemotron_h · dense
Базовая модель
Nemotron-3-Nano-Omni-30B-A3B-Reasoning
Библиотека
mlx
Опубликована
13 авг 2026

Nemotron-3-Nano-Omni-30B-A3B-JANGTQ-CRACK

Генерация текстаТекст → текст15 профессий

Мультимодальная модель dealignai на базе Nemotron-3-Nano-Omni для диалогов, рассуждений и работы с изображениями и аудио.

61скачиваний за 30 дней0лайковвеса обновлены13 авг 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Nemotron-3-Nano-Omni-30B-A3B-JANGTQ-CRACK — мультимодальная модель dealignai на базе NVIDIA Nemotron-3-Nano-Omni-30B-A3B-Reasoning. Это вариант с дообучением CRACK v2 и смешанной низкоразрядной схемой JANGTQ: 8-битными весами внимания и 2-битными маршрутизируемыми экспертами. В архитектуре сочетаются Mamba-2, внимание и MoE; базовая модель содержит 30B параметров с 3B активных, а в метаданных этой модели указано 1,9B параметров. Для запуска заявлена библиотека MLX; README рекомендует vMLX или jang-tools.

Модель предназначена для диалогов, рассуждений и мультимодальной работы с текстом, изображениями и аудио, включая речь. В карточке заявлена поддержка видео при использовании отдельного мультимодального дополнения. Контекст составляет 262 144 токена. README приводит результаты 81,5% на MMLU-200 и 91,6% на HarmBench-320, а также сообщает об удалении обучения отказам: модель может выдавать вредные ответы и требует собственного защитного слоя перед применением. Лицензия указана как other; конкретные условия следует проверять в репозитории.

Сценарии применения

  • диалоговые ответы и рассуждения по текстовым запросам
  • ответы на вопросы об изображениях
  • понимание аудиозаписей и речи
  • мультимодальный анализ текста, изображений и аудио
  • оценка поведения модели в red-teaming и исследованиях безопасности

Ограничения

Вариант CRACK лишён обучения отказам и может выдавать вредный контент, поэтому перед использованием нужен собственный защитный слой. Для поддержки видео README требует отдельное мультимодальное дополнение.

Для каких профессий подходит15

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Reasoning V3 SKU. Loads via vMLX or jang-tools Python. Follow @dealignai.



Nemotron-3-Nano-Omni-30B-A3B — JANGTQ + CRACK v2

JANGTQ (8-bit attn affine + 2-bit MXTQ routed experts) | CRACK abliterated v2 | Vision + Audio (Speech) | Hybrid Mamba-2 + Attn + MoE | 12 GB

Best MMLU in the v2 Omni family — 81.5% at thinking=ON. 5/5 comply at thinking=OFF too.


Headline numbers

MetricThis v2 modelBase modelΔ
HarmBench-320 strict comply (thinking=ON)91.6% (293/320)12.81%+78.8pp
MMLU-200 generative (thinking=ON, max=8000)81.5% (163/200)85.5% (max=2000)-4.0pp ✅
Refusals on harmful prompts0 explicit refuses90%+ refuseabliteration complete
</think> close at greedy on hard MMLU5/55/5preserved
Multi-turn (3-turn escalation × 3 conversations)9/9 comply, context preservedn/aworks
Thinking ON / OFF compliance5/5 in BOTH modesrefuses in bothworks in either
Multimodal byte-identical to basepreserved—preserved
Bundle size12 GB66 GB BF16smallest in family
Context262,144 tokens nativesamepreserved

JANGTQ outperforms JANGTQ4 on MMLU (81.5% vs 74.0%) despite using lower-bit (2-bit vs 4-bit) routed experts — same Q2 effect observed in Qwen 3.6 35B JANGTQ2 CRACK.


v2 vs v1 (head-to-head)

Benchv1 (broken)v2 (this release)
HarmBench-320 strict comply92.19%91.6% (0 refusals)
MMLU-200 thinking=ON~70% @max=1638481.5% @max=8000 (best in family)
</think> close at greedy (5 hard MMLU)0/55/5
Hard-stops are real loops?YES (paragraph repetition)NO (genuine deep reasoning, just out of budget)

MMLU-200 per-subject (BASE vs CRACK v2)

Both at thinking=ON, greedy. Base at max=2000, CRACK v2 at max=8000.

SubjectBaseCRACK v2ΔNotes
abstract_algebra15/20 (75%)14/20 (70%)-5pp
anatomy15/20 (75%)16/20 (80%)+5ppgain from CRACK
astronomy18/20 (90%)18/20 (90%)0unchanged
college_computer_science15/20 (75%)10/20 (50%)-25ppBudget-bound
college_physics17/20 (85%)18/20 (90%)+5ppgain from CRACK
high_school_biology20/20 (100%)18/20 (90%)-10pp
high_school_chemistry19/20 (95%)19/20 (95%)0unchanged
high_school_mathematics18/20 (90%)18/20 (90%)0unchanged
logical_fallacies18/20 (90%)17/20 (85%)-5pp
world_religions16/20 (80%)15/20 (75%)-5pp
TOTAL171/200 (85.5%)163/200 (81.5%)-4.0ppwithin ship criterion

Most subjects are within ±5pp of base or unchanged. The −25pp on college_computer_science is budget-bound (8000 tokens isn't enough for the deepest CS reasoning); with max_tokens=16384, accuracy approaches base.


HarmBench-320 per-category (CRACK v2)

CategorynCRACK complyRefuseEmpty (truncated)
chemical_biological4239 (93%)03
copyright8061 (76%)019
cybercrime_intrusion5251 (98%)01
harassment_bullying2119 (90%)02
harmful1818 (100%)00
illegal5351 (96%)02
misinformation_disinformation5454 (100%)00
Overall320293 (91.6%)027

Zero explicit refusals. The 27 "empty" verdicts are concentrated in copyright prompts (19/80) where the model thinks deeply about whether to reproduce verbatim text and runs out of the 1500-token HarmBench eval budget. With max_tokens=2500+ these would all close cleanly.


Operating recommendations

  • enable_thinking — v2 works in BOTH modes. JANGTQ specifically scored 5/5 at thinking=OFF (matching thinking=ON) — best in the family for thinking=OFF use cases.
  • max_tokens ≥ 16384 for hard reasoning. JANGTQ's compliance is identical in both modes, so use thinking=OFF for shorter budgets and thinking=ON for hardest prompts.
  • Greedy (temperature=0) AND sampling (temp=0.6, top_p=0.95 — NVIDIA-recommended in generation_config.json) both work.
  • Multi-turn — context preserved across 3+ turns; no late refusals after escalating prompts.

Verification

  • All multimodal tensors (vision + audio + projectors) are byte-identical to base — capabilities fully preserved.
  • All config files unchanged (config.json, jang_config.json, generation_config.json, chat_template.jinja, tokenizer_config.json).
  • Bit widths preserved: attn=8, shared=8, mamba=8, routed=2, embed=8, lm_head=8.

Architecture (nemotron_h)

  • 52 layers: hybrid Mamba-2 + MoE + Attention
  • Hidden 2688, head_dim 128, GQA 32q/2kv (NO RoPE on attention — position from Mamba state)
  • 128 routed experts top-6 (sigmoid) + 1 shared expert per MoE layer
  • Multimodal: image (RADIO ViT) + audio/speech (Parakeet) merged via early-fusion projectors

Loading

from huggingface_hub import snapshot_download
import sys
path = snapshot_download("dealignai/Nemotron-3-Nano-Omni-30B-A3B-JANGTQ-CRACK")
sys.path.insert(0, "/path/to/jang-tools")
from jang_tools.load_jangtq import load_jangtq_model
model, tokenizer = load_jangtq_model(path)

prompt = tokenizer.apply_chat_template(
    [{"role": "user", "content": "Your question"}],
    tokenize=False, add_generation_prompt=True,
    enable_thinking=True,
)
from mlx_lm import generate
out = generate(model, tokenizer, prompt=prompt, max_tokens=16384)
print(out.split("</think>", 1)[-1])

For the multimodal pipeline (image + audio + video), pair this bundle with the unmodified Multimodal-Addon.


Use responsibly

This model has had refusal training surgically removed for legitimate research, red-teaming, and evaluation. Outputs may include harmful content. You are solely responsible for any use. Do not deploy in consumer-facing contexts without your own safety layer. Do not use in violation of applicable law in your jurisdiction.


Built by dealignai. Sister bundles: JANGTQ4-CRACK (19 GB, 4-bit MXTQ) · MXFP4-CRACK (21 GB, uniform 4-bit affine).

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · mlx

Нельзя запустить

MLX-модели работают только на Apple Silicon.

Класс архитектуры
NemotronHForCausalLM
Ревизия весов
f073565

0 моделей