Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
uygarkurt/llama3s-merged-linear — объединённая модель на базе семейства Llama 3, созданная автором репозитория с помощью mergekit. В README указано, что автор выбрал три модели с высоким рейтингом в Open LLM Leaderboard и объединил их без дополнительного обучения. Архитектура — плотная авторегрессионная модель LlamaForCausalLM примерно на 7,5 млрд параметров; формат весов — safetensors, контекст — до 8192 токенов.
Модель предназначена для генерации текста в диалоговом режиме и может использоваться для ответов на запросы, написания черновиков и других задач общения с языковой моделью. Репозиторий распространяется по лицензии MIT. README называет результат «ranking model», однако метаданные относят его к генерации текста; сведений о специальной обученности для ранжирования нет.
Сценарии применения
ответы на вопросы в чате
генерация черновиков и пояснений
продолжение заданного текста
Ограничения
README не приводит результатов оценки качества и не подтверждает пригодность модели для ранжирования, несмотря на такое описание результата. Контекст ограничен 8192 токенами.
Для каких профессий подходит8
Разделы каталога профессий, в задачах которых используется эта модель
In this specific case, I typed llama-3 into the open LLM leaderboard, took the best 3 models, merged them and created
a better ranking model wihtout any training.