/ Модель

Характеристики

Контекст
262 144 токена
Размер весов
15,1 ГБ
Лицензия
Apache 2.0
Архитектура
qwen3_5 · dense
Библиотека
mlx
Опубликована
15 авг 2026

Qwen3.8-27B-AEON-ULTIMATE-UNCENSORED-4bit-MLX

Генерация текстаТекст → текст9 профессий

Qwen3.8-27B-AEON-ULTIMATE-UNCENSORED-4bit-MLX — это 4-битная MLX-квантизация модели AEON-7/Qwen3.8-27B-AEON-ULTIMATE-UNCENSORED-BF16.

2 507скачиваний за 30 дней11лайковвеса обновлены15 авг 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Исходную модель разработал AEON-7 при участии команды Qwen; оригинальная uncensored-версия создана автором под псевдонимом SpaceTimeViking. Репозиторий choppedgarlic содержит только конвертацию и квантизацию для локального запуска на компьютерах Apple Silicon, без дополнительного дообучения или намеренного изменения поведения.

Модель предназначена для генерации текста, интерактивного диалога и локального использования через MLX, включая OpenAI-совместимый сервер. Поддерживаются режимы с включённым и отключённым reasoning. Архитектура и точная структура исходной модели в README не раскрыты; известно, что размер модели составляет 27B параметров, используется формат MLX, 4-битная affine-квантизация с group size 64, а примерный размер загрузки — 14 ГБ. Указан английский язык. Модель работает только с текстом: vision-компоненты и обработка изображений отсутствуют и не заявлены. Рекомендуется Apple Silicon с unified memory объёмом от 32 ГБ.

К сильным сторонам относятся локальный запуск на Apple Silicon, поддержка интерактивного режима, reasoning и OpenAI-совместимого API при сниженных требованиях к памяти по сравнению с BF16-версией. Ограничения включают возможное снижение качества из-за квантизации, отсутствие мультимодальности, зависимость от MLX и платформы Apple Silicon, а также риск неточных, небезопасных или нежелательных ответов. Перед применением в производственных и ответственных сценариях результаты необходимо проверять. Модель выпущена под лицензией Apache License 2.0.

Для каких профессий подходит9

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Qwen3.8 27B AEON Ultimate Uncensored — 4-bit MLX

This is a 4-bit MLX quantization for Apple Silicon of AEON-7/Qwen3.8-27B-AEON-ULTIMATE-UNCENSORED-BF16.

Original Uncensored model made by @SpaceTimeViking , complete credit to him and all his work https://x.com/SpaceTimeViking

All model and fine-tuning credit belongs to the original author, AEON-7, and the upstream Qwen team. This repository only provides an MLX conversion and quantization for easier local use on Apple Silicon. No additional fine-tuning or intentional behavioral changes were made.

Quantization

  • Format: MLX
  • Quantization: 4-bit affine
  • Group size: 64
  • Approximate download size: 14 GB
  • Intended platform: Apple Silicon macOS
  • Recommended unified memory: 32 GB or more

Install

pip install -U mlx-lm

Run an interactive chat

mlx_lm.chat \
  --model choppedgarlic/Qwen3.8-27B-AEON-ULTIMATE-UNCENSORED-4bit-MLX \
  --max-tokens 8192 \
  --temp 0.6 \
  --top-p 0.95

The first launch downloads the model from Hugging Face. Later launches use the local Hugging Face cache.

Run an OpenAI-compatible local server

Thinking enabled:

mlx_lm.server \
  --model choppedgarlic/Qwen3.8-27B-AEON-ULTIMATE-UNCENSORED-4bit-MLX \
  --host 127.0.0.1 \
  --port 8081 \
  --max-tokens 8192 \
  --temp 0.6 \
  --top-p 0.95 \
  --chat-template-args '{"enable_thinking":true}'

Thinking disabled:

mlx_lm.server \
  --model choppedgarlic/Qwen3.8-27B-AEON-ULTIMATE-UNCENSORED-4bit-MLX \
  --host 127.0.0.1 \
  --port 8081 \
  --max-tokens 8192 \
  --temp 0.6 \
  --top-p 0.95 \
  --chat-template-args '{"enable_thinking":false}'

The API base URL is then http://127.0.0.1:8081/v1.

Verified locally

  • Text generation
  • Interactive mlx_lm.chat
  • Thinking and non-thinking modes
  • mlx_lm.server through its OpenAI-compatible API
  • Local use through the Pi coding agent

Limitations

  • This conversion is intended for Apple Silicon and requires MLX.
  • The current conversion contains no vision_config or vision preprocessor assets. Image input and image generation are not supported or claimed.
  • Quantization may reduce quality compared with the BF16 source model.
  • The model can produce inaccurate, unsafe, or objectionable output. Validate outputs before using them in production or high-stakes settings.
  • Please also read the original model card for its intended use, behavior, and limitations.

License and attribution

Released under the Apache License 2.0, matching the source repository's declared license. See LICENSE.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · mlx

Нельзя запустить

MLX-модели работают только на Apple Silicon, на GPU NVIDIA они не запускаются.

Класс архитектуры
Qwen3_5ForConditionalGeneration
Ревизия весов
875c852

0 моделей