/ Модель

Характеристики

Контекст
512 токенов
Параметры
53,9 млн
Лицензия
Apache 2.0
Архитектура
marian · dense
Опубликована
2 мар 2022

opus-mt-mkh-en

ПереводТекст → текст3 профессии

Модель OPUS-MT переводит тексты с мон-кхмерских языков на английский.

124скачиваний за 30 дней0лайковвеса обновлены16 авг 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Helsinki-NLP/opus-mt-mkh-en — модель машинного перевода семейства OPUS-MT, разработанная Helsinki-NLP на архитектуре Transformer и реализованная как MarianMTModel. Она переводит текст с мон-кхмерских языков на английский. В README перечислены кхмерский, кхму, кхаси, мон и вьетнамский, включая варианты письменности для кхмерского и вьетнамского; метаданные также отмечают языки vi, km и en. Модель содержит 53,9 млн параметров, использует нормализацию и SentencePiece с словарями по 32 тыс. токенов, а длина контекста составляет 512 токенов.

Модель подходит для перевода предложений и текстов с поддерживаемых языков на английский. В опубликованных тестах показатели различаются по языку: BLEU составляет 8,5 для кхмерского и менее 1 для кхаси и мон, что указывает на ограниченное качество для части языков. Доступны веса PyTorch и TensorFlow. Лицензия — Apache-2.0.

Сценарии применения

  • перевод с кхмерского на английский
  • перевод с кхму на английский
  • перевод с кхаси на английский
  • перевод с монского на английский
  • перевод с вьетнамского на английский

Ограничения

Качество перевода заметно зависит от языка: в README приведены низкие BLEU-показатели для кхаси и мон. Контекст ограничен 512 токенами.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

mkh-eng

  • source group: Mon-Khmer languages

  • target group: English

  • OPUS readme: mkh-eng

  • model: transformer

  • source language(s): kha khm khm_Latn mnw vie vie_Hani

  • target language(s): eng

  • model: transformer

  • pre-processing: normalization + SentencePiece (spm32k,spm32k)

  • download original weights: opus-2020-07-27.zip

  • test set translations: opus-2020-07-27.test.txt

  • test set scores: opus-2020-07-27.eval.txt

Benchmarks

testsetBLEUchr-F
Tatoeba-test.kha-eng.kha.eng0.50.108
Tatoeba-test.khm-eng.khm.eng8.50.206
Tatoeba-test.mnw-eng.mnw.eng0.70.110
Tatoeba-test.multi.eng24.50.407
Tatoeba-test.vie-eng.vie.eng34.40.529

System Info:

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
MarianMTModel
Ревизия весов
b21d3d6

0 моделей