Cheus-11B — англоязычная разговорная модель на основе Mistral для генерации текста и ответов на запросы.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
Cheus-11B — разговорная языковая модель, созданная ByteWave путём слияния lvkaokao/mistral-7b-finetuned-orca-dpo-v2 и teknium/OpenHermes-2.5-Mistral-7B. Она предназначена для генерации текста в диалогах и ответов на запросы. Модель основана на плотной архитектуре Mistral и содержит 10,6 млрд параметров; её контекстное окно составляет 32 768 токенов. В репозитории представлены веса Safetensors, лицензия — Apache-2.0.
Карточка указывает английский язык и разговорное применение. Результаты оценивания на Open LLM Leaderboard в README не приведены, поэтому качество на конкретных тестах по этим данным оценить нельзя.
В README не приведены результаты заявленных оценочных тестов, поэтому подтверждённые показатели качества отсутствуют.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
Merge of lvkaokao/mistral-7b-finetuned-orca-dpo-v2 and teknium/OpenHermes-2.5-Mistral-7B
Detailed results can be found Coming soon
| Metric | Value |
|---|---|
| Avg. | Coming soon |
| ARC (25-shot) | Coming soon |
| HellaSwag (10-shot) | Coming soon |
| MMLU (5-shot) | Coming soon |
| TruthfulQA (0-shot) | Coming soon |
| Winogrande (5-shot) | Coming soon |
| GSM8K (5-shot) | Coming soon |
| DROP (3-shot) | Coming soon |
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…