/ Модель

Характеристики

Контекст
512 токенов
Параметры
54,8 млн
Лицензия
Apache 2.0
Архитектура
marian · dense
Опубликована
2 мар 2022

opus-mt-cpp-en

ПереводТекст → текст3 профессии

Модель Helsinki-NLP на базе MarianMT переводит креольские языки и пиджины португальской основы на английский.

90скачиваний за 30 дней0лайковвеса обновлены16 авг 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Helsinki-NLP/opus-mt-cpp-en — модель машинного перевода семейства OPUS-MT, разработанная Helsinki-NLP на архитектуре Transformer и реализованная как MarianMT. Она переводит креольские языки и пиджины на португальской основе на английский; исходная группа включает индонезийский, минангкабау, папьяменто и варианты малайского. Для токенизации используются нормализация текста и SentencePiece с моделями словаря на 32 тыс. токенов. Модель содержит 54,8 млн параметров, её родной контекст — 512 токенов.

Карточка приводит контрольные результаты на наборах Tatoeba: BLEU 39,6–49,1 и chr-F около 0,58 для перечисленных тестов. Модель подходит для перевода текстов с поддерживаемых исходных языков на английский; качество может различаться между языками и типами текста. Лицензия — Apache-2.0.

Сценарии применения

  • перевод текстов на папьяменто на английский
  • перевод с минангкабау на английский
  • перевод с вариантов малайского на английский
  • перевод с индонезийского на английский
  • машинный перевод текстов на португальских креольских языках

Ограничения

Модель предназначена для перевода перечисленных исходных языков на английский, а не для перевода в обратном направлении. Контекст ограничен 512 токенами, а приведённые тестовые оценки не гарантируют качество на других языках и типах текстов.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

cpp-eng

  • source group: Creoles and pidgins, Portuguese-based

  • target group: English

  • OPUS readme: cpp-eng

  • model: transformer

  • source language(s): ind max_Latn min pap tmw_Latn zlm_Latn zsm_Latn

  • target language(s): eng

  • model: transformer

  • pre-processing: normalization + SentencePiece (spm32k,spm32k)

  • download original weights: opus2m-2020-07-31.zip

  • test set translations: opus2m-2020-07-31.test.txt

  • test set scores: opus2m-2020-07-31.eval.txt

Benchmarks

testsetBLEUchr-F
Tatoeba-test.msa-eng.msa.eng39.60.580
Tatoeba-test.multi.eng39.70.580
Tatoeba-test.pap-eng.pap.eng49.10.579

System Info:

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
MarianMTModel
Ревизия весов
92939b8

0 моделей