/ Модель

Характеристики

Контекст
131 072 токена
Параметры
1,2 млрд
Лицензия
Llama 3.2
Архитектура
llama · dense
Базовая модель
Llama-3.2-1B-Instruct
Библиотека
transformers
Опубликована
29 сен 2026

Llama-3.2-1B-Instruct-SMAT-NumGLUE-ds

Генерация текстаТекст → текст3 профессии

Эксперт SMAT на базе Llama 3.2 1B Instruct, обученный сохранять качество на целевой задаче и подходящий для последующего объединения с другими моделями.

410скачиваний за 30 дней0лайковвеса обновлены30 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

yanggangu/Llama-3.2-1B-Instruct-SMAT-NumGLUE-ds — экспертная модель SMAT, представленная в таблице 1 работы «SMAT: Simple and Efficient Merge-Aware Training». Она создана на базе Llama 3.2 1B Instruct с обучающим seed 42 и предназначена для сохранения качества на целевой задаче при последующем объединении с другими моделями. Архитектура — плотная авторегрессионная LlamaForCausalLM, размер — 1,2 млрд параметров; карточка указывает контекст до 131 072 токенов и возможность диалога.

Модель принимает текст и генерирует текст. README не раскрывает подробности обучающего набора NumGLUE-ds или конкретные результаты, поэтому качество на отдельных задачах и сценарии самостоятельного применения по карточке оценить нельзя. Применяется лицензия Llama 3.2 с соответствующей политикой допустимого использования.

Сценарии применения

  • изучение обучения экспертов для слияния моделей
  • эксперименты по объединению языковых моделей
  • генерация текста в диалоговом формате
  • сравнение качества моделей на NumGLUE-ds

Ограничения

README не приводит результаты оценки или подробности обучающих данных, поэтому качество на NumGLUE-ds и других задачах по карточке неясно.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Llama-3.2-1B-Instruct · SMAT · NumGLUE-ds

A SMAT expert from Table 1 of SMAT: Simple and Efficient Merge-Aware Training (training seed 42). SMAT trains experts that retain task performance while improving model merging.

Paper · GitHub & usage

Built with Llama. The included Llama 3.2 license and acceptable-use policy apply.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
2673c7c

0 моделей