Характеристики

Контекст: 512 токенов
Параметры: 58,4 млн
Лицензия: CC BY 4.0
Архитектура: marian · dense
Опубликована: 3 фев 2024

Ссылки

Hugging Face

marian-finetuned-kde4-zh-to-en

charliealex123

Языковая модель3 профессии

Компактная MarianMT-модель для перевода текстов с китайского на английский.

14скачиваний за 30 дней0лайковвеса обновлены11 фев 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Marian — компактная модель машинного перевода на архитектуре MarianMT, дообученная автором charliealex123 для направления с китайского на английский. Веса содержат 58,4 млн параметров, сохранены в формате safetensors; максимальная длина контекста — 512 токенов. В карточке приведён результат BLEU 77,0389 на оценочном наборе, однако сведения о наборе данных и методике оценки отсутствуют.

Модель предназначена для перевода китайских текстов на английский. Указана лицензия CC BY 4.0. Карточка не описывает ограничения, целевую область применения или дополнительные возможности модели.

Сценарии применения

перевод китайских сообщений на английский
перевод коротких китайских документов
черновой перевод китайских текстов для дальнейшей проверки

Ограничения

В README не описаны обучающие данные и подробности оценки, поэтому приведённый результат BLEU трудно интерпретировать. Максимальный контекст составляет 512 токенов.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

I.6Универсальные способностиПеревод и языковая адаптацияAI помогает переносить смысл между языками, форматами и культурными контекстами.16 задач16 710моделей I.5Универсальные способностиСоздание и редактирование текстаAI помогает создавать и улучшать текстовые материалы, сохраняя смысл и требования автора.18 задач44 385моделей III.4Корпоративные функцииКлиентская поддержка и customer successAI помогает быстрее решать обращения и предупреждать проблемы клиентов.20 задач9 831модель

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

marian-finetuned-kde4-zh-to-en

This model is a fine-tuned version of charliealex123/marian-finetuned-kde4-zh-to-en on an unknown dataset. It achieves the following results on the evaluation set:

Loss: 0.3645
Bleu: 77.0389

Model description

More information needed

Intended uses & limitations

More information needed

Training and evaluation data

More information needed

Training procedure

Training hyperparameters

The following hyperparameters were used during training:

learning_rate: 2e-05
train_batch_size: 16
eval_batch_size: 16
seed: 42
optimizer: Adam with betas=(0.9,0.999) and epsilon=1e-08
lr_scheduler_type: linear
num_epochs: 3
mixed_precision_training: Native AMP

Training results

Training Loss	Epoch	Step	Validation Loss	Bleu
No log	1.0	255	0.4811	71.9496
0.5435	2.0	510	0.3988	74.3566
0.5435	3.0	765	0.3645	77.0389

Framework versions

Transformers 4.35.2
Pytorch 2.1.0+cu121
Datasets 2.17.0
Tokenizers 0.15.1

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

У модели не указана задача.

Класс архитектуры: MarianMTModel
Ревизия весов: 4ef0e71