/ Модель

Характеристики

Лицензия
MIT
Архитектура
IndicTrans · dense
Опубликована
4 дек 2023

indictrans2-indic-en-dist-200M

Генерация текстаТекст → текст3 профессии

Дистиллированная модель IndicTrans2 примерно на 200 млн параметров для перевода с индийских языков на английский.

351скачиваний за 30 дней0лайковвеса обновлены22 янв 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

IndicTrans2 Indic-En Distilled 200M — дистиллированная модель машинного перевода семейства IndicTrans2, опубликованная пользователем Raghavan. Она предназначена для перевода с индийских языков на английский. Модель построена на архитектуре IndicTransForConditionalGeneration; число параметров — около 200 млн. В метаданных указаны языковые коды ассамского, бенгальского, бодо, догри, английского, конкани, гуджарати, хинди, каннада, кашмири, майтхили, малаялам, манипури, маратхи, непальского, ория, панджаби, санскрита, сантали, синдхи, тамильского, телугу и урду.

Модель подходит для перевода текстов на английский, включая сценарии, представленные наборами FLORES-200, IN22-Gen и IN22-Conv. Для использования требуется совместимая реализация IndicTrans2 для Transformers. Дистиллированный вариант ориентирован на более компактное выполнение перевода; конкретные показатели качества в карточке не приведены. Лицензия — MIT.

Сценарии применения

  • перевод текстов с хинди на английский
  • перевод бенгальских текстов на английский
  • перевод тамильских текстов на английский
  • перевод пользовательских запросов на английский с индийских языков

Ограничения

Модель предназначена для перевода с индийских языков на английский; обратное направление карточкой не заявлено. README не приводит численных метрик качества.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

IndicTrans2

This is the model card of IndicTrans2 Indic-En Distilled 200M variant.

Please refer to section 7.6: Distilled Models in the TMLR submission for further details on model training, data and metrics.

Usage Instructions

Please refer to the github repository for a detail description on how to use HF compatible IndicTrans2 models for inference.

Citation

If you consider using our work then please cite using:

@article{ai4bharat2023indictrans2,
  title   = {IndicTrans2: Towards High-Quality and Accessible Machine Translation Models for all 22 Scheduled Indian Languages},
  author  = {AI4Bharat and Jay Gala and Pranjal A. Chitale and Raghavan AK and Sumanth Doddapaneni and Varun Gumma and Aswanth Kumar and Janki Nawale and Anupama Sujatha and Ratish Puduppully and Vivek Raghavan and Pratyush Kumar and Mitesh M. Khapra and Raj Dabre and Anoop Kunchukuttan},
  year    = {2023},
  journal = {arXiv preprint arXiv: 2305.16307}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

Модели нужен код из репозитория; автор пока не в списке доверенных организаций.

Класс архитектуры
IndicTransForConditionalGeneration
Ревизия весов
d7b3cdf

0 моделей