Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
bababababooey/llama-3-8b-instruct-toxic — тестовая чат-модель на архитектуре LlamaForCausalLM, дообученная методом DPO на наборе unalignment/toxic-dpo-v0.2 в течение одной эпохи. Она предназначена для генерации текста в диалоговом формате и связана с токсичными предпочтениями из обучающего набора. Модель содержит 7,5 млрд параметров, принимает текст и поддерживает контекст до 8192 токенов.
Модель построена на семействе Llama 3 8B Instruct и опубликована в формате safetensors. Лицензия — Apache 2.0. Карточка характеризует её как тестовый DPO-чекпойнт; данных о целевых языках и результатах оценки качества нет.
Сценарии применения
эксперименты с DPO-дообучением чат-моделей
изучение генерации ответов на токсичные запросы
тестирование поведения Llama 3 после обучения на toxic-DPO-данных
Ограничения
Это тестовый чекпойнт, обученный одну эпоху на токсичном наборе предпочтений; качество и языковое покрытие не оценены. Следует учитывать риск генерации токсичных ответов.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель