Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
yeen214/llama2_7b_merge_orcafamily — плотная авторегрессионная языковая модель семейства LLaMA, созданная на основе Llama 2 7B. Разработчик объединил три дообученные версии: две обучены на beaugogh/openorca-multiplechoice-10k, одна из них с методом NEFTune, а третья — на Open-Orca/SlimOrca. При объединении больший вес получила модель с лучшими результатами ARC и MMLU.
Модель предназначена для генерации текста и ответов на вопросы на английском языке, в том числе для задач с вариантами ответа и общих запросов. Она содержит около 6,6 млрд параметров, использует формат safetensors и имеет контекстное окно 2048 токенов. Лицензия — MIT.
Автор сообщает о сравнении результатов ARC и MMLU, но официальные результаты в карточке ещё не приведены. Поэтому качество модели и её преимущество над базовой Llama 2 независимо оценить по имеющимся данным нельзя.
Сценарии применения
ответы на вопросы с вариантами ответа
генерация английского текста по запросу
решение задач ARC
ответы на вопросы общего характера
Ограничения
Контекст ограничен 2048 токенами. Официальные результаты ARC и MMLU в карточке отсутствуют, поэтому заявленные сравнительные преимущества не подтверждены приведёнными данными.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель