/ Модель

Характеристики

Контекст
512 токенов
Параметры
56,7 млн
Лицензия
Apache 2.0
Архитектура
marian · dense
Опубликована
2 мар 2022

opus-mt-zle-en

ПереводТекст → текст3 профессии

Трансформер Marian для перевода белорусского, русского, украинского и других восточнославянских текстов на английский язык.

165скачиваний за 30 дней0лайковвеса обновлены16 авг 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Helsinki-NLP разработала эту модель машинного перевода OPUS-MT для перевода с восточнославянских языков на английский. Это трансформер Marian с 56,7 млн параметров, доступный в форматах PyTorch и TensorFlow. Источник обрабатывается с нормализацией и SentencePiece; заявленная длина контекста — 512 токенов.

Модель принимает белорусский, русский, украинский, русинский и старославянский текст в кириллической и латинской записи там, где это указано в карточке, и переводит его на английский. Её можно использовать для перевода отдельных фраз и текстов; в README приведены результаты оценки на тестовых наборах новостных переводов с русского на английский.

Модель распространяется по лицензии Apache-2.0. Качество может различаться между языками и жанрами: приведённые в README оценки относятся к конкретным тестовым наборам, а отдельные результаты для всех исходных языков не указаны.

Сценарии применения

  • перевод русских текстов на английский
  • перевод белорусских текстов на английский
  • перевод украинских текстов на английский
  • перевод русинских текстов на английский
  • перевод старославянского текста на английский

Ограничения

Указанные в README оценки относятся к тестовым наборам новостных переводов, поэтому качество на других жанрах и доменах может отличаться. Для русинского и старославянского в карточке не приведены отдельные метрики.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

zle-eng

  • source group: East Slavic languages

  • target group: English

  • OPUS readme: zle-eng

  • model: transformer

  • source language(s): bel bel_Latn orv_Cyrl rue rus ukr

  • target language(s): eng

  • model: transformer

  • pre-processing: normalization + SentencePiece (spm32k,spm32k)

  • download original weights: opus2m-2020-08-01.zip

  • test set translations: opus2m-2020-08-01.test.txt

  • test set scores: opus2m-2020-08-01.eval.txt

Benchmarks

testsetBLEUchr-F
newstest2012-ruseng.rus.eng31.10.579
newstest2013-ruseng.rus.eng24.90.522
newstest2014-ruen-ruseng.rus.eng27.90.563
newstest2015-enru-ruseng.rus.eng26.80.541
newstest2016-enru-ruseng.rus.eng25.80.535
newstest2017-enru-ruseng.rus.eng29.10.561
newstest2018-enru-ruseng.rus.eng25.40.537
newstest2019-ruen-ruseng.rus.eng26.80.545
Tatoeba-test.bel-eng.bel.eng38.30.569
Tatoeba-test.multi.eng50.10.656
Tatoeba-test.orv-eng.orv.eng6.90.217
Tatoeba-test.rue-eng.rue.eng15.40.345
Tatoeba-test.rus-eng.rus.eng52.50.674
Tatoeba-test.ukr-eng.ukr.eng52.10.673

System Info:

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
MarianMTModel
Ревизия весов
5bd80e7

0 моделей