Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
Модель eren23/DistiLabelOrca-TinyLLama-1.1B — диалоговая языковая модель семейства Llama, разработанная на основе TinyLlama/TinyLlama-1.1B-Chat-v1.0. Автор дообучил её методом DPO на датасете argilla/distilabel-intel-orca-dpo-pairs, представляющем собой дистиллированную версию набора предпочтений Intel Orca. Модель содержит около 1 млрд параметров, использует архитектуру LlamaForCausalLM и работает с контекстом до 2048 токенов.
Модель предназначена для генерации текста в диалоге и ответов на вопросы на английском языке. Её можно применять для разговорных ассистентов и ответов на пользовательские запросы. В карточке приведены результаты Open LLM Leaderboard, включая среднее значение 37,17, но они сами по себе не гарантируют качество в конкретных сценариях. Доступна в формате safetensors для Transformers; лицензия — Apache-2.0.
Сценарии применения
создание англоязычного чат-бота
ответы на вопросы пользователя на английском языке
генерация диалоговых ответов
создание разговорного ассистента на базе небольшой языковой модели
Ограничения
Контекст ограничен 2048 токенами. Результаты бенчмарков не гарантируют качество на прикладных задачах.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель