Разговорная MoE-модель на базе FusionNet, дообученная методом DPO для генерации ответов с учётом предпочтений.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
cloudyu/Truthful_DPO_TomGrc_FusionNet_34Bx2_MoE — разговорная языковая модель, созданная Cloudyu дообучением TomGrc/FusionNet_34Bx2_MoE методом Direct Preference Optimization (DPO) на наборе предпочтений jondurbin/truthy-dpo-v0.1. Она предназначена для генерации текста в диалоге и выдачи ответов с учётом предпочтений, заданных при обучении.
Модель использует архитектуру Mixtral с разреженной смесью экспертов (MoE), содержит 33,9 млрд параметров и поддерживает контекст до 32 768 токенов. Репозиторий содержит веса в формате safetensors; заявленная лицензия — MIT. README сообщает об улучшении метрик после DPO, но не приводит конкретных результатов или независимой оценки.
README не приводит подробных оценок качества или конкретных результатов DPO; наличие длинного контекста не гарантирует одинаковую точность на всей его длине.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
DPO Trainer TRL supports the DPO Trainer for training language models from preference data, as described in the paper Direct Preference Optimization: Your Language Model is Secretly a Reward Model by Rafailov et al., 2023.
* Metrics improved by DPO
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
vLLM
Подбираем GPU…