Разреженная версия Qwen3-8B для генерации текста и диалогов, полученная с помощью неструктурированного прореживания и роста связей под управлением PGD.
340скачиваний за 30 дней0лайковвеса обновлены9 сен 2026
Бенчмарки
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Публичные оценки
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
Это разреженная версия Qwen3-8B, опубликованная пользователем cosmos1030. В модели применено неструктурированное удаление 70% параметров и выращивание связей под управлением PGD; в карточке также упомянуты KL radius delta=0.03 и исправление разбиения рангов для post OPKD. По метаданным это причинная языковая модель семейства Qwen3 с архитектурой Qwen3ForCausalLM, размером 7,6 млрд параметров и контекстом до 40 960 токенов; модель загружается через Transformers и сохранена в safetensors.
Модель предназначена для генерации текста и диалогового применения. В README приведена средняя оценка 48,95, но указано, что загруженная копия опубликована после завершения эксперимента, а исходный журнал запуска является источником метрик. Языки и условия лицензирования в доступных сведениях не приведены, поэтому их нельзя надёжно указать.
Сценарии применения
генерация текста по запросу
диалоговое взаимодействие с языковой моделью
эксперименты с разреживанием языковых моделей
оценка влияния неструктурированного прореживания на генерацию
Ограничения
README предупреждает, что для метрик опубликованной копии следует обращаться к исходному журналу запуска; приведённая средняя оценка 48,95 не сопровождается описанием набора данных или протокола оценки. Лицензия и поддерживаемые языки в доступных сведениях не указаны.
Для каких профессий подходит4
Разделы каталога профессий, в задачах которых используется эта модель
Archived from /NHNHOME/log-postech/doyoonkim/models/gmp_s70pct_lr0.0001_onpol_lmda0.33_20260906_105649 on this machine; uploaded after the fact, so the original run log is the source of truth for its metrics.
Как запустить
На своей GPU в ailist. Цена — по текущим предложениям провайдеров