Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
cockroach54/solar-sft-qlora — экспериментальная языковая модель на архитектуре Llama, дообученная автором для практики с помощью Transformers, PEFT и bitsandbytes. Модель содержит 10,6 млрд параметров и принимает текст для генерации текста; заявленный контекст — 4096 токенов.
В метаданных указаны корейский и английский языки, а среди данных для обучения — davidkim205/kollm-converations. Карточка приводит результаты оценки на задачах KoBEST, включая определение смысловой связи слов и анализ тональности, но не описывает подробные сценарии применения. Лицензия — Apache-2.0.
Сценарии применения
генерация текста на корейском языке
генерация текста на английском языке
эксперименты с дообучением Llama через PEFT и bitsandbytes
оценка понимания корейского языка на задачах KoBEST
Ограничения
Автор обозначает модель как предназначенную для практики; результаты оценки ограничены задачами KoBEST и сами по себе не подтверждают качество в широком наборе сценариев.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель