/ Модель

Характеристики

Контекст
262 144 токена
Размер весов
31,9 ГБ
Лицензия
Apache 2.0
Архитектура
qwen3_5 · dense
Базовая модель
Qwen3.8-27B
Библиотека
mlx
Опубликована
9 сен 2026

Qwen3.8-27B-Atlassian-Q8-base-mlx

Генерация текстаТекст → текст3 профессии

8-битная версия базовой Qwen3.8-27B для генерации текста на MLX, предназначенная для запуска и дальнейшей адаптации под задачи Atlassian.

222скачиваний за 30 дней0лайковвеса обновлены9 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Это базовый чекпойнт Qwen3.8-27B, подготовленный LeanZero для запуска на Apple Silicon через MLX. Модель не дообучалась на данных Atlassian: это аффинная 8-битная квантизация исходных весов bf16 с размером группы 64. Файл mtp.safetensors содержит отдельную голову multi-token prediction в bf16 для спекулятивного декодирования в совместимых движках; остальные движки могут игнорировать этот файл. Репозиторий содержит веса в формате safetensors и занимает около 30 ГБ.

Модель предназначена для генерации текста и диалогов на английском, а также для разработки и обучения собственных адаптаций под Jira, Confluence и Forge. В тестах LeanZero квантизированная версия показала близость к исходной bf16-модели на выбранной выборке промптов; совместимый движок может ускорять генерацию с помощью MTP. Это именно базовая, а не настроенная на инструкции модель: в тесте автора она слабо справлялась с идентификаторами Forge и не создавала корректные манифесты. Лицензия — Apache-2.0.

Сценарии применения

  • локальный запуск базовой языковой модели на Apple Silicon
  • дообучение модели для работы с Jira и Confluence
  • создание адаптаций для разработки на Forge
  • эксперименты со спекулятивным декодированием через MTP

Ограничения

Модель не обучена следовать инструкциям и, по тестам автора, слабо знает Forge: она редко распознавала идентификаторы и не создавала корректные манифесты. Ускорение через MTP доступно только в совместимых движках.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Qwen3.8-27B-Atlassian-Q8-base-mlx

The untouched 8-bit MLX base the LeanZero Atlassian models were trained on: Qwen3.8-27B quantised from Qwen's bf16 with the MTP speculative-decoding head kept as a sidecar.

Release base. The full write-up, with every test explained and every round compared, is on LeanZero's page: leanzero.net/portfolio/atlassian-models. The same evidence is reproduced below.

Built by LeanZero, the people behind CogniRunner (AI workflow rules for Jira), Sentinel Vault (Confluence attachment governance), LeanZero Management (PPM for Jira Cloud) and Atlassian migrations. Quantised with mlx-node and mlx-lm, trained with mlx-lm, served and evaluated with LeanZero's Rapid-MLX fork, all on one Apple Silicon Mac Studio.

What it is

A plain affine 8-bit (group size 64) MLX checkpoint of Qwen3.8-27B, built with mlx-node's qwen3_5 recipe from Qwen/Qwen3.8-27B, ~30 GB. What makes it different from lmstudio-community/Qwen3.8-27B-MLX-8bit (same weight class, same quality) is mtp.safetensors: the model's own multi-token-prediction head in bf16, shipped as a sidecar so engines that implement MTP (LeanZero's Rapid-MLX fork, goose local edition) get speculative decoding for free, and engines that do not simply ignore the file. Use this if you want to apply the Qwen3.8-27B-Atlassian-lora adapter yourself or train your own.

What it was trained on

No training. This is the quantised base; nothing was added or removed except the layout of the MTP head.

Measured

Quality vs the bf16 teacher, top-1024 KL divergence on 200 frozen prompts (100 Atlassian/Forge, 100 general code and chat): mean KLD 0.0446, top-1 agreement 99.35% (the lmstudio-community 8-bit: 0.0453 / 99.34%; an Unsloth-recipe 6-bit built from the same source with their imatrix: 0.0591 / 98.90%). Rapid-MLX on a Mac Studio M3 Ultra: decode 22.6 tok/s plain, 35.1 tok/s with MTP at short context (1.55×), 1.22× at 32k, draft acceptance 53%. DFlash2 drafter (single-user server): 2.08× at short context.

Evidence: every round, every test

This is the untouched base; the evidence table on the trained models' cards includes its row as the control.

How to run it

goose (LeanZero local edition) / Rapid-MLX

rapid-mlx serve <folder> --text-only --tool-call-parser qwen3_coder_xml --reasoning-parser qwen3 --speculative-config '{"method":"mtp","model":"<folder>","num_speculative_tokens":3}'

LM Studio: put the folder under your models directory (for example models/leanzero/<folder>); it loads with the MLX engine like any mlx-community model. Measured on this release, see above.

mlx-lm

mlx_lm.generate --model <folder> --prompt "Which Forge module adds a panel to the Jira issue view?"

Sampling

Thinking: temperature 1.0, top_p 0.95, top_k 20. Instruct: temperature 0.7, top_p 0.8, top_k 20, presence penalty 1.5. Trained with reasoning_effort=medium, preserve_thinking=false.

Limits

Untrained base: it knows almost nothing about Forge (2 of 13 and 3 of 13 on the two slices of our identifier probe, 0 of 25 valid manifests). It is here for reproducibility and for people who want to train on it. Do not run mlx convert on this folder without -q (mlx-node documents that it strips the zero-point and bricks the load), and never rename mtp.safetensors to match model*.safetensors: mlx-lm would read it into the backbone and shift the norms twice.

Family

Qwen3.8-27B-Atlassian-Q8-mlx (the tuned model, same layout), Qwen3.8-27B-Atlassian-lora (the adapter), Qwen3.8-27B-Atlassian-Q6-mlx and -Q4-mlx (smaller), Qwen3.5-9B-Atlassian-Q8-mlx and Qwen3.5-4B-Atlassian-Q8-mlx.

Licence and provenance

Apache-2.0 (inherits the base). Training data: Forge apps written by LeanZero, public Atlassian developer documentation, Atlassian Cloud OpenAPI specifications, LeanZero's vetted community-research compendium and posted community answers, 220 public Atlassian Developer Community threads (question plus accepted answer), and a small general-code replay slice. No credentials; tenant hostnames and e-mail addresses were rewritten before training, and the finished model was probed for memorised strings against a control run on the untrained base. Method and gates: see the LeanZero write-up.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · mlx

Нельзя запустить

MLX-модели работают только на Apple Silicon.

Класс архитектуры
Qwen3_5ForConditionalGeneration
Ревизия весов
c55e52c

0 моделей