/ Модель

Характеристики

Базовая модель
Huihui-HY-MT1.5-1.8B-abliterated
Библиотека
transformers
Опубликована
5 янв 2026

Huihui-HY-MT1.5-1.8B-abliterated-i1-GGUF

ПереводТекст → текст3 профессии

Huihui-HY-MT1.5-1.8B-abliterated-i1-GGUF — это набор квантованных файлов GGUF на основе модели Huihui-HY-MT1.5-1.8B-abliterated, разработанной huihui-ai и подготовленной квантизатором mradermacher.

941скачиваний за 30 дней2лайкавеса обновлены5 янв 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель предназначена прежде всего для машинного перевода и поддерживает широкий набор языков, включая китайский, английский, французский, португальский, испанский, японский, турецкий, русский, арабский, корейский, немецкий и многие другие.

Размер базовой модели составляет 1,8 млрд параметров. В репозитории представлены варианты квантизации i1 с форматами IQ и Q, размером примерно от 0,6 до 1,4 ГБ, а также imatrix-файл для самостоятельного создания квантованных версий. Это позволяет запускать модель на устройствах с ограниченными ресурсами и выбирать компромисс между скоростью, занимаемой памятью и качеством. В README не указаны архитектура, размер контекста, дополнительные модальности и точные характеристики качества.

Сильной стороной модели является поддержка большого числа языков и наличие компактных вариантов GGUF для локального использования. При этом низкобитные варианты могут заметно уступать по качеству; для некоторых файлов README отдельно отмечает низкое качество, тогда как i1-Q4_K_S и i1-Q4_K_M представлены как сбалансированные или рекомендуемые варианты. Модель обозначена как abliterated и uncensored, однако подробное описание этих свойств отсутствует. Лицензия в предоставленных данных не указана.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

About

weighted/imatrix quants of https://huggingface.co/huihui-ai/Huihui-HY-MT1.5-1.8B-abliterated

For a convenient overview and download list, visit our model page for this model.

static quants are available at https://huggingface.co/mradermacher/Huihui-HY-MT1.5-1.8B-abliterated-GGUF

Usage

If you are unsure how to use GGUF files, refer to one of TheBloke's READMEs for more details, including on how to concatenate multi-part files.

Provided Quants

(sorted by size, not necessarily quality. IQ-quants are often preferable over similar sized non-IQ quants)

LinkTypeSize/GBNotes
GGUFimatrix0.1imatrix file (for creating your own quants)
GGUFi1-IQ1_S0.6for the desperate
GGUFi1-IQ1_M0.6mostly desperate
GGUFi1-IQ2_XXS0.7
GGUFi1-IQ2_XS0.7
GGUFi1-IQ2_S0.8
GGUFi1-IQ2_M0.8
GGUFi1-Q2_K_S0.8very low quality
GGUFi1-IQ3_XXS0.9lower quality
GGUFi1-Q2_K0.9IQ3_XXS probably better
GGUFi1-IQ3_XS0.9
GGUFi1-Q3_K_S1.0IQ3_XS probably better
GGUFi1-IQ3_S1.0beats Q3_K*
GGUFi1-IQ3_M1.0
GGUFi1-Q3_K_M1.1IQ3_S probably better
GGUFi1-Q3_K_L1.1IQ3_M probably better
GGUFi1-IQ4_XS1.1
GGUFi1-Q4_01.2fast, low quality
GGUFi1-IQ4_NL1.2prefer IQ4_XS
GGUFi1-Q4_K_S1.2optimal size/speed/quality
GGUFi1-Q4_K_M1.2fast, recommended
GGUFi1-Q4_11.3
GGUFi1-Q5_K_S1.4
GGUFi1-Q5_K_M1.4
GGUFi1-Q6_K1.6practically like static Q6_K

Here is a handy graph by ikawrakow comparing some lower-quality quant types (lower is better):

image.png

And here are Artefact2's thoughts on the matter: https://gist.github.com/Artefact2/b5f810600771265fc1e39442288e8ec9

FAQ / Model Request

See https://huggingface.co/mradermacher/model_requests for some answers to questions you might have and/or if you want some other model quantized.

Thanks

I thank my company, nethype GmbH, for letting me use its servers and providing upgrades to my workstation to enable this work in my free time. Additional thanks to @nicoboss for giving me access to his private supercomputer, enabling me to provide many more imatrix quants, at much higher quality, than I would otherwise be able to.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

llama.cpp

Нельзя запустить

GGUF-модель ждёт проверки: нужно выбрать файл кванта под доступные GPU.

Ревизия весов
573095e

0 моделей