/ Модель

Характеристики

Контекст
512 токенов
Параметры
58,4 млн
Лицензия
Apache 2.0
Архитектура
marian · dense
Библиотека
transformers
Опубликована
26 сен 2023

Marian-NMT-en-zh-lil-fine-tune

ПереводТекст → текст3 профессии

Дообученная MarianMT-модель переводит тексты Ren’Py с английского на китайский, сохраняя форматирующие маркеры и английские имена.

34скачиваний за 30 дней6лайковвеса обновлены21 ноя 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Normal1919/Marian-NMT-en-zh-lil-fine-tune — дообученная модель машинного перевода на архитектуре Transformer MarianMT, созданная на основе Helsinki-NLP/opus-mt-en-zh. Она переводит английский текст на китайский и обучена сохранять специальные маркеры Ren’Py, например {i} и {/i}, а также английские имена персонажей для локализации визуальных новелл LIL. Модель содержит 58,4 млн параметров, работает с контекстом до 512 токенов и использует библиотеку Transformers.

Модель предназначена для перевода игровых и сценарных текстов с английского на китайский с сохранением разметки и имён. В карточке перечислены варианты китайского, включая упрощённое и традиционное письмо и несколько региональных языковых разновидностей. Весами можно пользоваться на условиях лицензии Apache-2.0.

Сценарии применения

  • Перевод диалогов визуальных новелл с английского на китайский
  • Локализация сценариев Ren’Py с сохранением тегов форматирования
  • Перевод игровых текстов с сохранением имён персонажей на английском

Ограничения

Модель ориентирована на перевод с английского на китайский и на сценарные тексты с маркерами Ren’Py; карточка не сообщает о поддержке других направлений перевода.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Normal1919/Marian-NMT-en-zh-lil-fine-tune

  • base model: MarianMTModel
  • pretrained_ckpt: Helsinki-NLP/opus-mt-en-zh
  • This model was trained for rpy dl translate

Model description

  • source group: English
  • target group: Chinese
  • model: transformer
  • source language(s): eng
  • target language(s): cjy_Hans cjy_Hant cmn cmn_Hans cmn_Hant gan lzh lzh_Hans nan wuu yue yue_Hans yue_Hant
  • fine_tune: On the basis of OPUS dataset checkpoints, train English original text with renpy text features (including but not limited to {i} [text] {/i}) to Chinese with the same reserved flag, as well as training for English name retention for LIL

How to use

>>> from transformers import AutoModelWithLMHead,AutoTokenizer,pipeline
>>> mode_name = 'Normal1919/Marian-NMT-en-zh-lil-fine-tune'
>>> model = AutoModelWithLMHead.from_pretrained(mode_name)
>>> tokenizer = AutoTokenizer.from_pretrained(mode_name)
>>> translation = pipeline("Marian-NMT-en-zh-lil-fine-tune", model=model, tokenizer=tokenizer)
>>> translation('I {i} should {/i} say that I feel a little relieved to find out that {i}this {/i} is why you’ve been hanging out with Kaori lately, though. She’s really pretty and I got jealous and...I’m sorry', max_length=400)
    [{'我{i}应该{/i}说发现{i}这{/i}是你最近和Kaori出去的原因,我有点松了一口气。她很漂亮,我嫉妒,而且......我很抱歉。'}]

Download

Contact

517205163@qq.com or a4564563@gmail.com

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры
MarianMTModel
Ревизия весов
8256431

0 моделей