EVA Qwen2.5 14B 0.1
Характеристики
- Контекст
- 131 072 токена
- Параметры
- 14 млрд
- Размер весов
- 29,5 ГБ
- Лицензия
- Apache 2.0
- Архитектура
- qwen2 · dense
- Базовая модель
- Qwen2.5-14B
- Опубликована
- 3 окт 2024
Ссылки
EVA-Qwen2.5-14B-v0.1
Дообученная Qwen2.5-14B для ролевого общения, написания историй и творческой генерации текста.
Бенчмарки
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Тесты пользователейпока нет
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Добавьте модель в бенчмарк
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Опишите свои задачи
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Запустите и опубликуйте
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Публичные оценки
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
EVA Qwen2.5 14B 0.1 — полно-параметрическая дообученная языковая модель, созданная Kearm и Auri на основе Qwen/Qwen2.5-14B. Она предназначена для ролевого общения, написания историй и творческих текстов; при обучении использовалась смесь синтетических и естественных данных, в том числе наборы для инструкций, ролевых карточек и коротких рассказов.
Модель построена на плотной архитектуре Qwen2 и содержит 14 млрд параметров. Она поддерживает генерацию текста, чатовый формат ChatML и контекст до 131 072 токенов. Для генерации авторы рекомендуют температуру 1, Typical-P 0,9, Min-P 0,05, Top-A 0,2 и штраф за повторения 1,03.
В версии 0.1 очищены и дедуплицированы обучающие данные, а также увеличена длина последовательности; по описанию авторов, модель стала стабильнее при коротких запросах и использовании Min-P. README не сообщает о целевых языках. Модель распространяется по лицензии Apache-2.0.
Сценарии применения
- написание коротких рассказов по заданной идее
- генерация продолжения художественного текста
- ролевое общение с персонажем
- создание ролевых карточек и диалогов персонажей
- ответы на творческие инструкции в чатовом формате
Ограничения
Языки, на которых модель специально обучена или проверена, в предоставленных данных не указаны. Авторы не рекомендуют квантизировать KV-кэш Qwen2.5, поскольку это может ухудшить качество генерации.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель
Карточка модели
README от автора на Hugging Face, как он его опубликовал
Как запустить
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…
- Класс архитектуры
- Qwen2ForCausalLM
- Ревизия весов
- 9a2d68a