Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
AbsoluteMaxMin-baseline — экспериментальная модель генерации текста для диалогов, созданная на основе meta-llama/Llama-3.1-8B-Instruct. Она дообучена на данных SafeRLHF с целями повысить полезность ответов и их безвредность; в описанном сравнении с NBPO использованы одинаковые наборы ответов, температуры, точка разногласия и бюджет оптимизатора, а различался способ выбора весов целевых функций. Модель содержит 7,5 млрд параметров, использует плотную архитектуру Llama и принимает текстовые запросы, выдавая текст; заявленная длина контекста — 131 072 токена.
Модель предназначена для диалоговой генерации и исследования многокритериальной оптимизации предпочтений и согласования полезности и безопасности. В карточке приведён протокол оценки: независимый уровень побед по каждой цели относительно общей базовой политики, с оценками Llama-3.3-70B-Instruct на отложенных промптах, не пересекающихся с обучающими, и при обоих порядках предъявления ответов. Лицензия — Llama 3.1; применяются её условия использования.
Сценарии применения
генерация ответов в диалоговом ассистенте
сравнение методов согласования языковых моделей
исследование оптимизации предпочтений по полезности и безопасности
Ограничения
В README не приведены количественные результаты, поэтому качество и компромисс между полезностью и безвредностью по описанию оценить нельзя. Для использования действуют условия лицензии Llama 3.1.
Для каких профессий подходит4
Разделы каталога профессий, в задачах которых используется эта модель
Matched game-aggregation control: same response pool, temperatures, disagreement point and optimiser budget as NBPO, differing only in how the objective weights are chosen.
Evaluation protocol: independent objective-wise win rate against the common reference,
judged by Llama-3.3-70B-Instruct on prompt-disjoint held-out prompts, both presentation orders.
Как запустить
На своей GPU в ailist. Цена — по текущим предложениям провайдеров