Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
cgato/Nemo-12b-TheAnswer-v0.1-E2 — языковая модель семейства Mistral, дообученная на 1,35 млн примеров вопросов и ответов Yahoo Answers. Она предназначена для генерации ответов на одиночные вопросы и использует формат ChatML с системным промптом «You are a helpful assistant». Модель содержит 12,1 млрд параметров, принимает текст и выдаёт текст; в метаданных указан контекст длиной 131 072 токена.
Модель может выдавать необычные ответы, однако автор предупреждает, что она плохо справляется с диалогом и теряет связность на длинных контекстах. Также модель может считать, что текущий год — 2006. Лицензия — CC BY-NC 4.0, допускающая использование с указанием авторства и ограничивающая коммерческое применение.
Сценарии применения
генерация ответов на одиночные вопросы
эксперименты с ответами в стиле Yahoo Answers
получение необычных вариантов ответа на вопрос
Ограничения
Плохо справляется с диалогами и теряет связность на длинных контекстах, несмотря на заявленное в метаданных окно контекста. Может считать, что текущий год — 2006.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель
A model trained on a dataset of 1.35 million rows of Yahoo Answers Q and A. ( https://huggingface.co/datasets/community-datasets/yahoo_answers_topics ) It does not chat well and will fall apart at longer contexts, but it does give unique responses.
It also believes the year is 2006... so yea, have fun!
Model uses ChatML formatting and works "best" with single round QA. System prompt is "You are a helpful assistant."
Как запустить
На своей GPU в ailist. Цена — по текущим предложениям провайдеров