Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
Модель AbdallahNasir/gender-mt-gemma2-2b-cpo-fewshot-inv — дообученная на базе Google Gemma 2 2B Instruct диалоговая модель для генерации текста. В карточке указано обучение методом CPO на парах TED с гендерно маркированными вариантами перевода и предложениях TED, где перевод не меняется; использовались промпты с тремя примерами: мужским, женским и нейтральным.
Модель предназначена для перевода с учётом гендера говорящего и выбора подходящей формы либо сохранения нейтрального перевода. Архитектура — плотная Gemma2ForCausalLM, размер — 2,7 млрд параметров, контекст — до 8192 токенов. Доступна в формате safetensors через Transformers; лицензия — Gemma.
Сценарии применения
перевод фраз с выбором формы по гендеру говорящего
перевод предложений с учётом гендерно маркированных пар
сохранение нейтральной формулировки при переводе
оценка влияния few-shot примеров на гендерно-чувствительный перевод
Ограничения
Карточка не сообщает языковые пары и не приводит результаты оценки качества перевода. Назначение и обучающие данные описаны узко, поэтому пригодность для других жанров и сценариев не подтверждена.
Карточка модели
README от автора на Hugging Face, как он его опубликовал