Характеристики

Лицензия: Apache 2.0
Базовая модель: Qwen3.8-27B-Abliterated-SFT
Библиотека: transformers
Опубликована: 23 авг 2026

Ссылки

Qwen3.8-27B-Abliterated-SFT-GGUF

Генерация текстаТекст → текст5 профессий

Qwen3.8-27B-Abliterated-SFT-GGUF — набор GGUF-квантизаций модели azukivc/Qwen3.8-27B-Abliterated-SFT, подготовленный mradermacher.

1 248скачиваний за 30 дней1лайквеса обновлены23 авг 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель основана на Qwen3.8-27B-Abliterated-SFT, дообученной методом supervised fine-tuning (SFT) и подвергнутой abliteration. Она предназначена для генерации текста и может использоваться в совместимых средах, поддерживающих формат GGUF, включая vLLM; README указывает английский язык и библиотеку Transformers.

Доступны варианты квантизации от Q2_K до Q8_0, включая IQ4_XS, с размером файлов примерно от 11 до 29,1 ГБ. Также предоставляются мультимодальные дополнения mmproj в форматах Q8_0 и f16, однако подробности о поддерживаемых модальностях, архитектуре, длине контекста, точном количестве параметров и языковом охвате не указаны. Более качественными названы Q6_K и Q8_0, а Q4_K_S и Q4_K_M отмечены как быстрые и рекомендуемые; варианты с меньшей разрядностью требуют меньше памяти, но могут снижать качество.

Модель распространяется по лицензии Apache-2.0. README не содержит результатов тестирования, подробных инструкций по применению или описания ограничений исходной модели, поэтому её фактические возможности и качество следует оценивать отдельно для конкретных задач.

Для каких профессий подходит5

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

I.5Универсальные способностиСоздание и редактирование текстаAI помогает создавать и улучшать текстовые материалы, сохраняя смысл и требования автора.18 задач44 385моделей II.6Разработка и данныеДокументация и сопровождение разработкиAI помогает поддерживать понятную техническую документацию и ускорять передачу знаний.18 задач38 015моделей I.2Универсальные способностиСинтез, понимание и проверка знанийAI помогает сжимать, сопоставлять и критически проверять знания без потери существенного контекста.18 задач42 341модель II.2Разработка и данныеСоздание и понимание программного кодаAI помогает писать, объяснять и связывать программный код с требованиями и существующей системой.20 задач21 443модели

Также подходит для

II.10Разработка и эксплуатация AI/ML-систем

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

About

static quants of https://huggingface.co/azukivc/Qwen3.8-27B-Abliterated-SFT

For a convenient overview and download list, visit our model page for this model.

weighted/imatrix quants are available at https://huggingface.co/mradermacher/Qwen3.8-27B-Abliterated-SFT-i1-GGUF

Usage

If you are unsure how to use GGUF files, refer to one of TheBloke's READMEs for more details, including on how to concatenate multi-part files.

Provided Quants

(sorted by size, not necessarily quality. IQ-quants are often preferable over similar sized non-IQ quants)

Link	Type	Size/GB	Notes
GGUF	mmproj-Q8_0	0.7	multi-modal supplement
GGUF	mmproj-f16	1.0	multi-modal supplement
GGUF	Q2_K	11.0
GGUF	Q3_K_S	12.4
GGUF	Q3_K_M	13.6	lower quality
GGUF	Q3_K_L	14.7
GGUF	IQ4_XS	15.5
GGUF	Q4_K_S	15.9	fast, recommended
GGUF	Q4_K_M	16.9	fast, recommended
GGUF	Q5_K_S	19.1
GGUF	Q5_K_M	19.6
GGUF	Q6_K	22.5	very good quality
GGUF	Q8_0	29.1	fast, best quality

Here is a handy graph by ikawrakow comparing some lower-quality quant types (lower is better):

And here are Artefact2's thoughts on the matter: https://gist.github.com/Artefact2/b5f810600771265fc1e39442288e8ec9

FAQ / Model Request

See https://huggingface.co/mradermacher/model_requests for some answers to questions you might have and/or if you want some other model quantized.

Thanks

I thank my company, nethype GmbH, for letting me use its servers and providing upgrades to my workstation to enable this work in my free time.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

llama.cpp

Нельзя запустить

GGUF-модель ждёт проверки: нужно выбрать файл кванта под доступные GPU.

Ревизия весов: 95ec714