Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
yanggangu/Llama-3.1-8B-Instruct-FT-C-STANCE — дообученная диалоговая модель на архитектуре Llama 3.1, созданная как эксперт для экспериментов SMAT (Simple and Efficient Merge-Aware Training). В README указано, что это эксперт из таблицы 1 статьи, обученный с seed 42; SMAT предназначен для обучения экспертов, сохраняющих качество на задаче и упрощающих последующее слияние моделей.
Модель основана на meta-llama/Llama-3.1-8B-Instruct и содержит 7,5 млрд параметров. Она принимает текст и генерирует текст; метаданные указывают контекст до 131 072 токенов и поддержку диалога. Название C-STANCE указывает на тематическую настройку, однако README не раскрывает конкретные данные и сценарии этой задачи.
Репозиторий содержит веса в формате safetensors и использует лицензию Llama 3.1; применяются соответствующие лицензия и политика допустимого использования Meta. Это исследовательский экспертный чекпойнт, рассчитанный на сохранение навыка при слиянии с другими моделями.
Сценарии применения
Эксперименты со слиянием дообученных языковых моделей
Генерация текста в диалоговом формате
Оценка поведения эксперта C-STANCE в исследовательских сценариях
Ограничения
README не описывает конкретные навыки C-STANCE, обучающие данные и результаты оценки, поэтому прикладную точность модели оценить нельзя.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель
A FT expert from Table 1 of SMAT: Simple and Efficient Merge-Aware Training (training seed 42). SMAT trains experts that retain task performance while improving model merging.