Экспериментальная разреженная версия Qwen3 для генерации текста и диалогов с 70% неструктурированной разреженности.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
gmp-kd3e-1-s70pct-lr1e-4_20260828_073925 — экспериментальная разреженная версия Qwen3-4B, созданная с помощью capped PGD и цели reverse-KL OPD. В README указано, что модель имеет 70% неструктурированной разреженности; метаданные описывают её как причинную языковую модель Qwen3 примерно на 3,7 млрд параметров с контекстом до 40 960 токенов.
Модель предназначена для генерации текста и диалоговых сценариев. В карточке упомянуты пять успешно пройденных бенчмарков, однако названия тестов и их результаты не приведены. Репозиторий использует Transformers и формат safetensors; лицензия в доступных данных не указана.
README не приводит названия и результаты упомянутых бенчмарков. Лицензия и поддерживаемые естественные языки в предоставленных данных не указаны.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
Qwen3-4B, 70% unstructured, capped PGD with reverse-KL OPD objective. 5/5 benchmarks.
Archived from /NHNHOME/log-postech/doyoonkim/models/gmp_s70pct_lr0.0001_onpol_lmda0.33_20260828_073925 on this machine; uploaded after the fact, so the original run log is the source of truth for its metrics.
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм · transformers
Репозиторий недоступен на Hugging Face.