/ Модель

Характеристики

Контекст
40 960 токенов
Параметры
7,6 млрд
Размер весов
16,4 ГБ
Архитектура
qwen3 · dense
Библиотека
transformers
Опубликована
9 сен 2026

gmp-kd3e-1-s70pct-lr1e-4_20260906_105649

Генерация текстаТекст → текст4 профессии

Разреженная версия Qwen3-8B для генерации текста и диалогов, полученная с помощью неструктурированного прореживания и роста связей под управлением PGD.

340скачиваний за 30 дней0лайковвеса обновлены9 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Это разреженная версия Qwen3-8B, опубликованная пользователем cosmos1030. В модели применено неструктурированное удаление 70% параметров и выращивание связей под управлением PGD; в карточке также упомянуты KL radius delta=0.03 и исправление разбиения рангов для post OPKD. По метаданным это причинная языковая модель семейства Qwen3 с архитектурой Qwen3ForCausalLM, размером 7,6 млрд параметров и контекстом до 40 960 токенов; модель загружается через Transformers и сохранена в safetensors.

Модель предназначена для генерации текста и диалогового применения. В README приведена средняя оценка 48,95, но указано, что загруженная копия опубликована после завершения эксперимента, а исходный журнал запуска является источником метрик. Языки и условия лицензирования в доступных сведениях не приведены, поэтому их нельзя надёжно указать.

Сценарии применения

  • генерация текста по запросу
  • диалоговое взаимодействие с языковой моделью
  • эксперименты с разреживанием языковых моделей
  • оценка влияния неструктурированного прореживания на генерацию

Ограничения

README предупреждает, что для метрик опубликованной копии следует обращаться к исходному журналу запуска; приведённая средняя оценка 48,95 не сопровождается описанием набора данных или протокола оценки. Лицензия и поддерживаемые языки в доступных сведениях не указаны.

Для каких профессий подходит4

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

gmp-kd3e-1-s70pct-lr1e-4_20260906_105649

Qwen3-8B, 70% unstructured, PGD-driven growth, KL radius delta=0.03, post OPKD rank-partition fix. Avg 48.95.

Archived from /NHNHOME/log-postech/doyoonkim/models/gmp_s70pct_lr0.0001_onpol_lmda0.33_20260906_105649 on this machine; uploaded after the fact, so the original run log is the source of truth for its metrics.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Нельзя запустить

Репозиторий недоступен на Hugging Face.

Класс архитектуры
Qwen3ForCausalLM
Ревизия весов
51e903e

0 моделей