Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
Helsinki-NLP/opus-mt-fr-ilo — модель машинного перевода семейства MarianMT, разработанная проектом OPUS. Она переводит текст с французского языка на илоканский. Модель основана на архитектуре Transformer-align, обучена на данных OPUS и использует нормализацию и SentencePiece для предобработки текста. Размер модели — 55,9 млн параметров, длина контекста — 512 токенов; доступны форматы PyTorch и TensorFlow.
Модель предназначена для перевода предложений и текстовых фрагментов с французского на илоканский. В карточке приведена оценка BLEU 30,6 и chr-F 0,528 на тестовом наборе JW300.fr.ilo. Модель распространяется по лицензии Apache-2.0. Оценка на одном тестовом наборе не гарантирует аналогичного качества для других тематик и типов текста.
Сценарии применения
перевод французских фраз на илоканский
перевод коротких сообщений с французского на илоканский
черновой перевод франкоязычных материалов для илоканских читателей
Ограничения
В карточке приведены метрики только для тестового набора JW300.fr.ilo, поэтому качество на других тематиках и типах текста не установлено. Контекст ограничен 512 токенами.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель