Объединённая методом TIES модель Llama на 10,6 млрд параметров для генерации текста и диалогов, оценённая на корейских языковых тестах.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
ENERGY-DRINK-LOVE/SOLAR_merge2 — объединённая методом TIES разговорная языковая модель на архитектуре Llama с 10,6 млрд параметров. Она предназначена для генерации текста и диалоговых сценариев. Контекст составляет 4096 токенов. В README приведены результаты на Ko-LLM-Leaderboard, включая средний балл 53,03; это указывает на оценку модели на корейских языковых тестах, но не гарантирует качество в конкретных пользовательских задачах.
Модель служит базой для ENERGY-DRINK-LOVE/SOLAR_merge2_dpo. Репозиторий содержит веса Safetensors и распространяется по лицензии Apache-2.0.
Контекст ограничен 4096 токенами. Результаты бенчмарка не подтверждают качество для задач, отличных от перечисленных корейских тестов.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
merge(ties) model
Ko-LLM-Leaderboard 구 genne/kiwi_merge_solar_ties (24.12.29 기준 리더보드 2등)
| Average | Ko-ARC | Ko-HellaSwag | Ko-MMLU | Ko-TruthfulQA | Ko-CommonGen V2 |
|---|---|---|---|---|---|
| 53.03 | 48.81 | 55.96 | 54.32 | 49.04 | 57.02 |
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм · transformers
Подбираем GPU…