/ Модель

Характеристики

Контекст
512 токенов
Параметры
57,4 млн
Лицензия
Apache 2.0
Архитектура
marian · dense
Опубликована
2 мар 2022

opus-mt-en-dra

ПереводТекст → текст3 профессии

Marian-модель OPUS-MT переводит с английского на тамильский, каннада, малаялам и телугу.

1 611скачиваний за 30 дней3лайкавеса обновлены16 авг 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Helsinki-NLP выпустила OPUS-MT eng-dra — модель машинного перевода на архитектуре Transformer в семействе Marian. Она переводит с английского на тамильский, каннада, малаялам и телугу; перед целевым текстом требуется указать языковой токен в формате >>id<<. Модель содержит 57,4 млн параметров, использует нормализацию и SentencePiece с словарями по 32 тыс. единиц и рассчитана на контекст до 512 токенов.

Модель подходит для перевода фраз и текстов с английского на четыре дравидийских языка. В README приведены тестовые оценки BLEU 4,7 для каннада и 13,1 для малаялам, а также агрегированная оценка BLEU 10,7; качество зависит от языка и текста. Модель распространяется по лицензии Apache-2.0.

Сценарии применения

  • перевод английских фраз на тамильский
  • перевод англоязычных текстов на каннада
  • перевод с английского на малаялам
  • перевод англоязычных материалов на телугу

Ограничения

Перевод выполняется только с английского на тамильский, каннада, малаялам или телугу; для выбора целевого языка нужен специальный токен. Тестовые оценки различаются по языкам и указывают на неодинаковое качество перевода.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

eng-dra

  • source group: English

  • target group: Dravidian languages

  • OPUS readme: eng-dra

  • model: transformer

  • source language(s): eng

  • target language(s): kan mal tam tel

  • model: transformer

  • pre-processing: normalization + SentencePiece (spm32k,spm32k)

  • a sentence initial language token is required in the form of >>id<< (id = valid target language ID)

  • download original weights: opus-2020-07-26.zip

  • test set translations: opus-2020-07-26.test.txt

  • test set scores: opus-2020-07-26.eval.txt

Benchmarks

testsetBLEUchr-F
Tatoeba-test.eng-kan.eng.kan4.70.348
Tatoeba-test.eng-mal.eng.mal13.10.515
Tatoeba-test.eng.multi10.70.463
Tatoeba-test.eng-tam.eng.tam9.00.444
Tatoeba-test.eng-tel.eng.tel7.10.363

System Info:

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
MarianMTModel
Ревизия весов
5ecfd22

0 моделей