/ Модель

Характеристики

Контекст
512 токенов
Параметры
37,1 млн
Лицензия
Apache 2.0
Архитектура
marian · dense
Опубликована
2 мар 2022

opus-mt-cus-en

ПереводТекст → текст3 профессии

Модель OPUS-MT на базе Marian переводит сомалийский текст на английский.

116скачиваний за 30 дней1лайквеса обновлены28 ноя 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Helsinki-NLP/opus-mt-cus-en — модель машинного перевода из семейства OPUS-MT, разработанная Helsinki-NLP на архитектуре Transformer и опубликованная в рамках Tatoeba Challenge. Она переводит текст с сомалийского языка на английский; обозначение cus в названии относится к группе кушитских языков, но в карточке указан сомалийский как исходный язык модели.

Модель построена на Marian и содержит 37,1 млн параметров. Для обработки текста применяются нормализация и SentencePiece с моделями токенизации spm12k; нативная длина контекста — 512 токенов. В тестах Tatoeba для направления сомалийский—английский указаны BLEU 16,2 и chr-F 0,303.

Модель подходит для перевода сомалийских фраз и текстов на английский, в том числе для многоязычных сценариев, связанных с кушитскими языками, если входной язык соответствует обучающим данным. Короткий контекст и умеренные тестовые показатели ограничивают применение на длинных документах и задачах, требующих высокой точности. Лицензия — Apache-2.0.

Сценарии применения

  • перевод сомалийских фраз на английский
  • перевод коротких сообщений с сомалийского
  • машинный перевод сомалийских текстов для первичного ознакомления

Ограничения

Контекст ограничен 512 токенами; тестовые показатели BLEU 16,2 и chr-F 0,303 указывают на возможные ошибки, поэтому перевод требует проверки для важных задач. Карточка описывает направление сомалийский—английский, хотя идентификатор использует код группы cus.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

cus-eng

Benchmarks

testsetBLEUchr-F
Tatoeba-test.multi.eng16.20.303
Tatoeba-test.som-eng.som.eng16.20.303

System Info:

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
MarianMTModel
Ревизия весов
9017846

0 моделей