/ Модель

Характеристики

Базовая модель
GLM-5.2
Библиотека
mlx
Опубликована
18 июн 2026

GLM-5.2-MLX-Q4.8-INF

Генерация текста4 профессии

inferencerlabs/GLM-5.2-MLX-Q4.8-INF — квантизированная версия GLM-5.2, разработанная на основе модели zai-org/GLM-5.2 и подготовленная для библиотеки MLX.

1 662скачиваний за 30 дней9лайковвеса обновлены18 июн 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель предназначена для генерации текста и локального вывода на устройствах Apple Silicon, включая использование через приложение Inferencer.

Ключевая особенность — квантизация Q4.8-INF с применением метода INF, настроенного на высокую общую точность при ограничении памяти в 512 ГиБ. В README указано, что на M3 Ultra с 512 ГиБ памяти скорость текстового вывода составила около 15,8 токена в секунду при обработке последовательности длиной около 1000 токенов; потребление памяти — примерно 417 ГиБ. Модель относится к текстовым, однако сведения об архитектуре, количестве параметров, поддерживаемых языках и размере контекста не приведены.

К преимуществам относятся адаптация к MLX, возможность локального запуска и сохранение высокой точности по сравнению с базовой моделью согласно приведённым сравнительным измерениям конвертации GLM 5.1. Ограничения связаны с очень высоким требованием к оперативной памяти, отсутствием подробных данных о качестве на прикладных задачах и тем, что приведённые метрики относятся к GLM 5.1, а не непосредственно к GLM 5.2. Лицензия в README не указана.

Для каких профессий подходит4

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

GLM 5.2

See GLM 5.2 in action: demonstration videos

Tested with an M3 Ultra 512 GiB using Inferencer app v2.0.4

  • Text Inference: ~15.8 tokens/s @ 1000 tokens ~417 GiB

Screenshot 1 Screenshot 2 Screenshot 3

Due to system memory and time constraints, the figures shown below are from the conversion of GLM 5.1.

Quantized with a modified version of MLX.
For more details see our demonstration videos or visit zai-org/GLM-5.1.

Disclaimer

We are not the creator, originator, or owner of any model listed. Each model is created and provided by third parties. Models may not always be accurate or contextually appropriate. You are responsible for verifying the information before making important decisions. We are not liable for any damages, losses, or issues arising from its use, including data loss or inaccuracies in AI-generated content.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · mlx

Нельзя запустить

MLX-модели работают только на Apple Silicon, на GPU NVIDIA они не запускаются.

Ревизия весов
d6ea136

0 моделей