Дообученная на Qwen2.5-7B-Instruct диалоговая модель для генерации текста с контекстом до 32 768 токенов.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
MATH Lvl 5
MATH Lvl 5 Raw · выше — лучше
0,2017
Публичная таблицадругая ревизия
MMLU-PRO
MMLU-PRO Raw · выше — лучше
0,4166
Публичная таблицадругая ревизия
Описание составлено по карточке модели и метаданным Hugging Face
Sethuiyer/Qwen2.5-7B-Anvita — дообученная диалоговая языковая модель на архитектуре Qwen2, созданная на базе Qwen/Qwen2.5-7B-Instruct. Модель содержит 7,1 млрд параметров, принимает текст и генерирует текст; максимальная длина контекста — 32 768 токенов. В метаданных указан английский язык.
Модель предназначена для диалогов и генерации текста. В README приведены результаты оценки: средний показатель 29,18, IFEval (0-shot) — 64,8, BBH (3-shot) — 35,48; полные результаты предлагается смотреть отдельно. Лицензия — Apache-2.0. README не раскрывает специализацию дообучения или подробные ограничения модели.
README не уточняет специализацию дообучения и не приводит подробных ограничений или методики оценки; опубликованы лишь отдельные результаты бенчмарков.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
| Metric | Value |
|---|---|
| Avg. | 29.18 |
| IFEval (0-Shot) | 64.8 |
| BBH (3-Shot) | 35.48 |
| MATH Level 5 (4-Shot) | 15.86 |
| GPQA (0-Shot) | 10.29 |
| MuSR (0-Shot) | 13.47 |
| MMLU-PRO (5-Shot) | 35.17 |
Detailed results can be found here. Personal Benchmarks - check PERSONAL_BENCHMARK.md merge
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм · transformers
Подбираем GPU…