Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
Это дообученная диалоговая модель на базе Meta Llama 3.2 1B Instruct, представленная как эксперт NumGLUE-cm из таблицы 1 статьи SMAT: Simple and Efficient Merge-Aware Training. Она предназначена для генерации текста и диалоговых сценариев; в работе SMAT такие эксперты обучаются сохранять качество на своей задаче и облегчать последующее слияние моделей. Модель имеет плотную архитектуру LlamaForCausalLM, около 1,2 млрд параметров и контекст до 131 072 токенов. Используются Transformers и формат safetensors.
В карточке не описаны конкретные примеры применения NumGLUE-cm, поэтому специализированные сценарии этой модели нельзя определить точнее. Языковая поддержка унаследована от многоязычной базовой модели Llama 3.2 1B Instruct. Для использования действуют лицензия Llama 3.2 и соответствующая политика допустимого использования Meta.
Сценарии применения
генерация ответов в диалоговом интерфейсе
проверка дообученной модели в экспериментах по слиянию
сравнение качества эксперта SMAT с базовой Llama 3.2 Instruct
Ограничения
README не раскрывает метрики качества, детали данных дообучения или точный набор поддерживаемых языков для этого эксперта. При использовании необходимо соблюдать лицензию Llama 3.2 и политику допустимого использования Meta.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель
A FT expert from Table 1 of SMAT: Simple and Efficient Merge-Aware Training (training seed 42). SMAT trains experts that retain task performance while improving model merging.