Разговорная модель Llama на 10,6 млрд параметров для генерации текста, полученная слиянием двух моделей и обученная с учётом пользовательских предпочтений.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
SOLAR-10.7B-merge-dpo — текстовая разговорная модель команды ETRI xainlp, созданная слиянием heavytail/kullm-solar и upstage/SOLAR-10.7B-Instruct-v1.0 с помощью MergeKit. Модель содержит 10,6 млрд параметров, основана на плотной архитектуре Llama и рассчитана на контекст до 4096 токенов.
Модель принимает текст и генерирует текст; её можно применять для диалоговых ответов и других задач генерации текста. При создании использовался набор из 90 тысяч пользовательских предпочтений для DPO+LoRA. Веса опубликованы в формате safetensors.
Лицензия CC BY-NC 4.0 разрешает использование с указанием авторства, но запрещает коммерческое использование. Карточка не приводит сведений о поддерживаемых языках или специализированных предметных областях.
Лицензия CC BY-NC 4.0 запрещает коммерческое использование. Поддерживаемые языки и качество на конкретных задачах в карточке не описаны.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
Model Developers ETRI xainlp team
Input text only.
Output text only.
Model Architecture
We used MergeKit to merge Model heavytail/kullm-solar into Model upstage/SOLAR-10.7B-Instruct-v1.0 as the base.
Base Model upstage/SOLAR-10.7B-Instruct-v1.0
Merge Model heavytail/kullm-solar
Training Dataset
dpo+lora: 90k user preference set
We use A100 GPU 80GB * 1, when training.
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…