/ Модель

Характеристики

Контекст
1 024 токена
Параметры
464 млн
Лицензия
CC BY 4.0
Архитектура
m2m_100 · dense
Опубликована
15 мая 2023

nllb-finetuned-en2ko

ПереводТекст → текст4 профессии

Дообученная модель NLLB для перевода текстов с английского на корейский.

569скачиваний за 30 дней25лайковвеса обновлены26 июл 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель NHNDQ/nllb-finetuned-en2ko разработана Jisu Kim, Juhwan Lee, TakSung Heo и Minsu Jeong. Это дообученная версия facebook/nllb-200-distilled-600M для перевода с английского на корейский язык.

Модель основана на архитектуре M2M100 и содержит 463,7 млн параметров. Она принимает текст и генерирует текст; длина контекста составляет 1024 токена. Для обучения использован набор данных AI-hub. В карточке приведён BLEU 33,66 для дообученной модели и 22,83 для DeepL на указанном авторами сравнении.

Модель предназначена для перевода англоязычных текстов на корейский. Лицензия CC-BY-4.0 разрешает использование с соблюдением её условий. Карточка также упоминает применение для преобразования текста и расширения корейских данных с помощью обратного перевода.

Сценарии применения

  • перевод англоязычных текстов на корейский
  • локализация англоязычных материалов для корейской аудитории
  • подготовка корейских переводов для последующей проверки редактором
  • создание корейских обучающих примеров обратным переводом

Ограничения

Модель ориентирована на перевод только с английского на корейский; качество зависит от тематики и формулировок исходного текста. Приведённый BLEU относится к сравнению, описанному в карточке, и сам по себе не гарантирует качество для других данных.

Для каких профессий подходит4

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Model Details

  • Model Description: Fine-tuned facebook/nllb-200-distilled-600M model
  • Developed by: Jisu Kim, Juhwan Lee, TakSung Heo, and Minsu Jeong
  • Model Type: Translation
  • Language(s):
    • Source Language: English
    • Target Language: Korean
  • License: CC-BY-4.0

Dataset

BLEU Score

  • Deepl translation: 22.83
  • Fine-tune nllb: 33.66

Uses

This model can be used for translation and text-to-text generation

Data Augmentation with backtranslation task

You can exercise korean data augmentation task with python package KoTAN

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
M2M100ForConditionalGeneration
Ревизия весов
27078d9

0 моделей