/ Модель

Характеристики

Контекст
512 токенов
Параметры
56,8 млн
Лицензия
Apache 2.0
Архитектура
marian · dense
Опубликована
2 мар 2022

opus-mt-bnt-en

ПереводТекст → текст3 профессии

Модель OPUS-MT переводит тексты с нескольких языков банту на английский.

163скачиваний за 30 дней1лайквеса обновлены16 авг 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Helsinki-NLP/opus-mt-bnt-en — модель машинного перевода из проекта OPUS-MT, разработанная на архитектуре Transformer и реализованная как MarianMT. Она переводит тексты с нескольких языков банту на английский: среди исходных языков README перечисляет киньяруанда, лингала, луганда, ньянджа, рунди, шона, суахили, тсонга, тсонга? и зулу; также указаны тсонга, тсонга (цицонга), тсонга, тсонга и умбунду. Модель содержит 56,8 млн параметров, использует нормализацию и SentencePiece с 32-тысячным словарём и имеет контекстное окно 512 токенов.

Модель предназначена для перевода с перечисленных языков на английский; обратный перевод не заявлен. Качество зависит от исходного языка: в README приведены результаты BLEU от 5,3 до 31,7 для отдельных наборов Tatoeba, поэтому оценку стоит проводить на собственных текстах, особенно для языков с низкими опубликованными результатами. Лицензия — Apache-2.0.

Сценарии применения

  • перевод с киньяруанда на английский
  • перевод с суахили на английский
  • перевод с зулу на английский
  • перевод текстов на английский с других поддерживаемых языков банту

Ограничения

Качество заметно различается между языками; опубликованные оценки BLEU для отдельных наборов Tatoeba низкие для некоторых языков. Обратный перевод с английского на языки банту не заявлен.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

bnt-eng

  • source group: Bantu languages

  • target group: English

  • OPUS readme: bnt-eng

  • model: transformer

  • source language(s): kin lin lug nya run sna swh toi_Latn tso umb xho zul

  • target language(s): eng

  • model: transformer

  • pre-processing: normalization + SentencePiece (spm32k,spm32k)

  • download original weights: opus2m-2020-07-31.zip

  • test set translations: opus2m-2020-07-31.test.txt

  • test set scores: opus2m-2020-07-31.eval.txt

Benchmarks

testsetBLEUchr-F
Tatoeba-test.kin-eng.kin.eng31.70.481
Tatoeba-test.lin-eng.lin.eng8.30.271
Tatoeba-test.lug-eng.lug.eng5.30.128
Tatoeba-test.multi.eng23.10.394
Tatoeba-test.nya-eng.nya.eng38.30.527
Tatoeba-test.run-eng.run.eng26.60.431
Tatoeba-test.sna-eng.sna.eng27.50.440
Tatoeba-test.swa-eng.swa.eng4.60.195
Tatoeba-test.toi-eng.toi.eng16.20.342
Tatoeba-test.tso-eng.tso.eng100.01.000
Tatoeba-test.umb-eng.umb.eng8.40.231
Tatoeba-test.xho-eng.xho.eng37.20.554
Tatoeba-test.zul-eng.zul.eng40.90.576

System Info:

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
MarianMTModel
Ревизия весов
ad7798c

0 моделей