I.6Перевод и языковая адаптация
В разделе собраны самостоятельные задачи, где AI помогает переносить смысл между языками, форматами и культурными контекстами. Для каждого пункта отдельно указаны механизм, входы, результат и способ проверки.
Рекомендованные модели
16 710 моделейsayanmandal/t5-small_6_3-en-hi_en_bt — компактная модель семейства T5 с 38,5 млн параметров, обученная с нуля для перевода текста. Название указывает на направления английский—хинди и обратный перевод с использованием обратного перевода в обучении; README подтверждает обучение с нуля, но не раскрывает датасет и точную схему языковых направлений. Модель предназначена для задач машинного перевода. В опубликованной оценке указаны Loss 1,9293, BLEU 8,9676 и средняя длина генерации 33,391 токена. Контекст модели — 512 токенов. Доступны веса в формате PyTorch; сведения о лицензии не представлены.
WindyTranslate/translate-cau-en — модель машинного перевода, опубликованная Windstorm Labs и предназначенная для перевода с кавказских языков на английский. Она основана на Helsinki-NLP/opus-mt-cau-en: к исходным весам применили дообучение LoRA на параллельном корпусе, а затем объединили адаптер с базовой моделью. Архитектура — MarianMT, размер — 57,1 млн параметров, формат — safetensors; модель работает через Transformers и принимает текст, выдавая текст. Модель поддерживает только направление cau → en. Качество перевода ещё не оценивалось, поэтому изменение весов подтверждает происхождение модели, но не её качество. Лицензия — Apache-2.0.
WindyTranslate/translate-en-sit — модель машинного перевода, опубликованная Windstorm Labs и предназначенная для перевода с английского языка на язык сит. Это дообученная версия Helsinki-NLP/opus-mt-en-sit: LoRA-дообучение на параллельных текстах объединено с базовыми весами. Модель использует архитектуру MarianMT, содержит 55,6 млн параметров и принимает текст с контекстом до 512 токенов, выдавая переведённый текст. Модель поставляется в формате safetensors и загружается через Transformers. Лицензия — Apache-2.0. Качество перевода не оценивалось бенчмарками; факт изменения весов подтверждает происхождение модели, но сам по себе не говорит о качестве.
Windstorm Labs выпустила модель машинного перевода с английского языка на тив. Это дообученная версия Helsinki-NLP/opus-mt-en-tiv: LoRA-дообучение на параллельном корпусе объединено с базовыми весами. Модель построена на архитектуре Marian и содержит 47,2 млн параметров; она доступна в формате safetensors для Transformers. Максимальная длина контекста составляет 512 токенов. Модель предназначена для перевода англоязычного текста на тив. Поддерживается только это направление перевода. Язык выходного текста проверен, но качество перевода ещё не оценивалось, поэтому пригодность результатов для конкретных задач не подтверждена. Лицензия — Apache-2.0.
Windstorm Labs опубликовала модель машинного перевода с английского на урду. Это дообученная модель Helsinki-NLP/opus-mt-en-ur на параллельном корпусе: LoRA-адаптер объединён с исходными весами. Модель построена на архитектуре Marian и содержит 56,9 млн параметров; доступна в формате safetensors для Transformers, максимальная длина контекста — 512 токенов. Модель предназначена для перевода английских текстов на урду. В карточке приведён ограниченный скрининговый результат на 48 предложениях FLORES-200: chrF++ 22,09 и BLEU 4,49; эта оценка не является результатом публикационного исследования и указывает на ограниченное качество. Другие направления перевода не заявлены. Лицензия — Apache-2.0.
Windstorm Labs опубликовала модель машинного перевода с испанского языка на csn. Это дообученная версия Helsinki-NLP/opus-mt-es-csn: LoRA-дообучение на параллельных корпусах объединено с базовыми весами. Модель построена на архитектуре MarianMT, содержит 39,5 млн параметров и принимает текст с контекстом до 512 токенов. Модель предназначена для перевода текста с испанского на csn. Репозиторий содержит сборку Transformers в формате safetensors; лицензия — Apache-2.0. Качество перевода пока не оценивалось бенчмарками, поэтому заявленное изменение весов подтверждает происхождение модели, но не её точность.
WindyTranslate/translate-es-ln — модель машинного перевода, опубликованная Windstorm Labs. Она дообучена на параллельных данных для перевода с испанского на лингала: LoRA-адаптер объединён с весами базовой Helsinki-NLP/opus-mt-es-ln. Модель построена на архитектуре Marian, содержит 56,1 млн параметров и доступна в формате safetensors для Transformers. Контекст ограничен 512 токенами. Модель предназначена для перевода текстов с испанского на лингала. В оценке на 48 предложениях FLORES-200 она получила chrF++ 36,67 и BLEU 7,04; авторы относят результат к уровню «Usable» и подчёркивают, что это предварительная проверка, а не результат публикационного исследования. Модель распространяется по лицензии Apache-2.0 с указанием происхождения базовой модели.
Windstorm Labs опубликовала модель машинного перевода с испанского языка на ниуэ. Это дообученная версия Helsinki-NLP/opus-mt-es-niu: LoRA-дообучение на параллельном корпусе объединено с базовыми весами. Модель построена на архитектуре MarianMT, содержит 48,4 млн параметров, принимает текст и выдаёт перевод; максимальная длина контекста — 512 токенов. Модель предназначена для перевода текста с испанского на ниуэ, например, коротких сообщений и документов. В репозитории доступны веса в формате safetensors для Transformers. Качество этой версии ещё не оценивалось бенчмарками, поэтому точность перевода не подтверждена. Лицензия — Apache-2.0.
Windstorm Labs опубликовала модель машинного перевода с финского языка на люксембургский. Это дообученная версия Helsinki-NLP/opus-mt-fi-lu: LoRA-адаптация на параллельных данных объединена с базовыми весами. Модель использует архитектуру MarianMT, содержит 57,1 млн параметров и рассчитана на контекст до 512 токенов. Модель предназначена для перевода текста только в направлении fi→lu. Репозиторий содержит сборку для Transformers в формате safetensors. Качество перевода не оценивалось, поэтому пригодность для конкретных задач следует проверять отдельно. Лицензия — Apache-2.0; исходная модель создана Helsinki-NLP, а Windstorm Labs указывает её происхождение и атрибуцию.
WindyTranslate/translate-fi-run — модель машинного перевода от Windstorm Labs, полученная дообучением Helsinki-NLP/opus-mt-fi-run: LoRA-адаптер обучили на параллельном корпусе и объединили с базовыми весами. Модель с архитектурой Marian содержит 56,9 млн параметров и принимает текст на финском языке, выдавая перевод на кирунди; заявленная длина контекста — 512 токенов. Модель предназначена для перевода с финского на кирунди. В репозитории размещена сборка Transformers в формате safetensors; лицензия — Apache-2.0. В карточке приведена ограниченная проверочная оценка на 48 предложениях FLORES-200: chrF++ 28,81 и BLEU 3,46, поэтому результат не следует считать публикационной оценкой качества.
WindyTranslate/translate-fi-st — модель машинного перевода, опубликованная Windstorm Labs и основанная на Helsinki-NLP/opus-mt-fi-st. Это дообученная модель архитектуры MarianMT с 56,5 млн параметров; LoRA-дообучение на параллельном корпусе объединено с базовыми весами. Модель принимает текст на финском языке и переводит его на сесото. Она распространяется в формате safetensors для Transformers и имеет лицензию Apache-2.0. В карточке приведён скрининговый результат на 48 предложениях из FLORES-200 dev: chrF++ 32,50 и BLEU 6,46, с оценкой качества «Usable». Это ограниченная проверка, а не публикационный результат. Модель поддерживает только направление финский → сесото; качество может меняться в зависимости от текста. Другие сборки, включая CTranslate2 INT8, в этом репозитории отсутствуют.
Windstorm Labs опубликовала модель машинного перевода с французского языка на бемба. Это модель архитектуры MarianMT с 56,4 млн параметров и контекстом до 512 токенов, основанная на Helsinki-NLP/opus-mt-fr-bem. Её веса изменены: LoRA дообучение на параллельном корпусе объединено с базовыми весами; репозиторий содержит сборку Transformers в формате safetensors. Модель предназначена для перевода французских текстов на бемба. В проверке на 48 предложениях FLORES-200 dev она получила chrF++ 27,35 и BLEU 3,81; авторы относят результат к ограниченному диапазону и отмечают, что это предварительная оценка, а не результат публикационного исследования. Поддерживается только направление fr → bem. Лицензия — Apache-2.0.
WindyTranslate/translate-fr-bi — модель машинного перевода от Windstorm Labs для перевода с французского на язык Bislama (bi). Это дообученная версия Helsinki-NLP/opus-mt-fr-bi: LoRA-дообучение на параллельном корпусе объединено с базовыми весами. Модель построена на архитектуре MarianMT, содержит 54,6 млн параметров и принимает контекст до 512 токенов. Модель предназначена для прямого перевода французских текстов на Bislama в приложениях на Transformers. Репозиторий содержит веса safetensors; лицензия — Apache-2.0. Разработчик сообщает, что веса изменены относительно исходной модели, однако качество перевода ещё не оценивалось бенчмарком.
Windstorm Labs опубликовала модель машинного перевода с французского языка на игбо. Это дообученная версия Helsinki-NLP/opus-mt-fr-ig: LoRA-адаптер обучили на параллельном корпусе и объединили с базовыми весами. Модель построена на архитектуре MarianMT, содержит 55,8 млн параметров и принимает последовательности длиной до 512 токенов. Репозиторий содержит веса Safetensors для Transformers. Модель предназначена для перевода текста с французского на игбо; обратное направление не заявлено. В скрининговой оценке на 48 предложениях FLORES-200 она набрала chrF++ 24,84 и BLEU 4,22, что README относит к ограниченному уровню. Эти результаты не являются публикационной оценкой и не гарантируют качество на других текстах. Лицензия — Apache-2.0.
Windstorm Labs опубликовала MarianMT-модель для машинного перевода с французского на лушайский язык. Это дообученная версия Helsinki-NLP/opus-mt-fr-lus: LoRA-дообучение на параллельных текстах объединено с базовыми весами. Модель содержит 52,4 млн параметров, принимает текст и выдаёт текст; длина контекста — 512 токенов. Модель предназначена для перевода текстов с французского на лушайский. В репозитории размещена сборка Transformers в формате safetensors. Лицензия — Apache-2.0. В README приведена ограниченная проверка на 48 предложениях FLORES-200: chrF++ 20,38 и BLEU 2,80; эти результаты не являются публикационной оценкой качества.
Модель raynardj/wenyanwen-chinese-translate-to-ancient разработана для перевода современного китайского языка на классический китайский (вэньянь). Это модель архитектуры encoder-decoder на базе Transformers и PyTorch, обученная на корпусе из более чем 900 тысяч пар предложений. Она предназначена для преобразования современных фраз в краткие формулировки на классическом китайском; например, фраза о ста юанях переводится как «不 肯 与 我 百 钱». Для генерации полных предложений в README рекомендуется задавать eos_token_id равным 102: без этого возможен остаточный текст после перевода. Модель распространяется по лицензии Apache-2.0. Карточка также ссылается на родственную модель обратного направления — перевод с классического китайского на современный, но это отдельная модель.
Mdkaif2782/banglish-to-bangla — модель преобразования текста, разработанная на основе facebook/mbart-large-50 и дообученная для перевода банглиш-текста, записанного латиницей, в бенгальскую письменность. Она подходит для преобразования отдельных фраз и пользовательского ввода; для работы используется библиотека PyTorch и токенизатор MBart50. Модель построена на архитектуре mBART с условной генерацией текста, содержит 457,4 млн параметров и имеет контекст до 1024 токенов. В карточке указаны языковые коды бенгальского и английского; целевой результат — текст на бенгальском. Репозиторий предлагает запуск через Transformers, в том числе в Google Colab. Лицензия в предоставленных данных не указана.
Hy-MT2-1.8B WMT26 — модель перевода субтитров с китайского на английский, разработанная ShivRamSaud и дообученная на базе Hy-MT2-1.8B с помощью QLoRA на данных субтитров TVsub для соревнования WMT26 Video Subtitle Translation. Модель имеет плотную авторегрессионную архитектуру Hunyuan v1, содержит 1,8 млрд параметров и поддерживает контекст до 262 144 токенов. Модель предназначена для перевода видеосубтитров с китайского на английский. В README приведены результаты BLEU 32,48, chrF 44,07 и TER 55,99 на выборке из 200 пар, взятой из обучающих данных TVsub. Модель распространяется в формате safetensors по лицензии Apache-2.0. Оценка на небольшой выборке из обучающих данных не показывает качество на независимом тестовом наборе.
JEJUMA-002 — корейская языковая модель для работы с региональными диалектами, разработанная в рамках проекта по их сохранению. Это плотная авторегрессионная модель семейства Llama на 7,5 млрд параметров, дообученная на базе Llama 3.1 с помощью LoRA. Модель принимает текст и поддерживает диалоговый режим; заявленная длина контекста — 131 072 токена. Модель преобразует диалектную речь в стандартный корейский, переводит стандартный корейский на диалект, определяет диалект региона и может определить его с последующим переводом на стандартный язык. Для обучения отобрали около 750 тысяч пар диалектных и стандартных фраз и расширили их до примерно 2 миллионов примеров для четырёх задач. По описанию авторов, при работе со сложными диалектами модель уступает GPT-4o, Solar и HyperCLOVA X по точности перевода. Распространяется по лицензии MIT.
MEYNG/nllb-sango-finetuned-600m-v2-2 — модель машинного перевода, созданная MEYNG дообучением Facebook NLLB-200 distilled 600M. Она предназначена прежде всего для перевода с санго на французский; архитектура M2M100, число параметров — 463,7 млн, контекст — до 1024 токенов. Поддерживается перевод в обоих направлениях, но для перевода с французского на санго авторы рекомендуют исходную базовую модель. На тестах FLORES+ devtest и SIB-200 модель немного превзошла базовую в направлении санго → французский. Данные обучения преимущественно относятся к религиозному и гуманитарному веб-тексту, поэтому качество на разговорных и технических текстах санго проверено ограниченно. Лицензия CC-BY-NC-4.0 разрешает некоммерческое использование.
Helsinki-NLP/opus-mt-de-iso — модель машинного перевода семейства OPUS-MT, разработанная Helsinki-NLP. Она переводит текст с немецкого языка на язык с кодом iso и предназначена для автоматического перевода отдельных текстов и корпусов. Модель построена на архитектуре MarianMT с Transformer-align; в предобработке используются нормализация и SentencePiece. Модель содержит 49,6 млн параметров и рассчитана на контекст до 512 токенов. Для набора JW300.de.iso в карточке приведены результаты BLEU 21,4 и chr-F 0,389. Доступны веса PyTorch и TensorFlow. Лицензия — Apache-2.0.
Helsinki-NLP/opus-mt-de-pag — модель машинного перевода из семейства OPUS-MT, разработанная Helsinki-NLP. Она переводит текст с немецкого языка на pangasinan (пангасинанский). Модель основана на архитектуре Transformer-align и использует нормализацию текста и токенизацию SentencePiece; число параметров — 56,3 млн, контекст — до 512 токенов. Модель предназначена для перевода фраз и текстов с немецкого на пангасинанский. В README приведён результат на тестовом наборе JW300.de.pag: BLEU 24,3 и chr-F 0,469. Доступны веса в форматах PyTorch и TensorFlow. Лицензия — Apache-2.0.
kalese/opus-mt-en-bkm — модель машинного перевода, полученная дообучением Helsinki-NLP/opus-mt-en-ro на наборе данных arrow. Она предназначена для перевода текстов с английского на bkm. Модель построена на архитектуре Marian, содержит 55,7 млн параметров и рассчитана на контекст до 512 токенов. В оценке на тестовой выборке указаны BLEU 14,5684 и loss 1,1597. Распространяется по лицензии Apache-2.0.
Xenova/opus-mt-en-sv — это модель машинного перевода с английского на шведский язык, разработанная на основе Helsinki-NLP/opus-mt-en-sv. Репозиторий содержит ONNX-веса, подготовленные для совместимости с библиотекой Transformers.js и использования в JavaScript-приложениях, включая веб-среду. Модель предназначена для автоматического перевода текста с английского языка на шведский. Её ключевая особенность — формат ONNX, обеспечивающий интеграцию с Transformers.js; такие веса могут использоваться в браузерных или других JavaScript-сценариях, совместимых с этой библиотекой. Архитектура, размер, максимальная длина контекста, дополнительные модальности и точные языковые характеристики в README не указаны. Сильной стороной модели является готовность к применению в веб-ориентированных приложениях через Transformers.js. Ограничения связаны с узкой направленностью на перевод с английского на шведский и отсутствием сведений о качестве, производительности, требованиях к ресурсам и лицензии. Условия лицензирования в предоставленных данных не указаны.
Xenova/opus-mt-sv-en — модель машинного перевода, разработанная на основе Helsinki-NLP/opus-mt-sv-en. Она предназначена для перевода текста со шведского языка на английский и ориентирована на использование в приложениях, поддерживающих Transformers.js. Модель поставляется с весами в формате ONNX, что обеспечивает совместимость с Transformers.js и позволяет применять её в веб-среде и других сценариях, где требуется выполнение моделей через ONNX. В README не указаны размер модели, точная архитектура, максимальная длина контекста, дополнительные модальности или характеристики качества перевода. Сильная сторона модели — готовность к использованию в JavaScript- и web-приложениях благодаря формату ONNX. Ограничения связаны с узкой языковой направленностью: модель предназначена только для перевода со шведского на английский. Лицензия и условия использования в представленном README не указаны.
Tencent-Hy-30B-A3B-uncensored-heretic-GGUF — это набор квантованных моделей в формате GGUF, созданный mradermacher на основе модели 0xSojalSec/Tencent-Hy-30B-A3B-uncensored-heretic. В README также указано, что исходная модель связана с Tencent-Hy; отдельное подтверждение разработчика исходной модели не приведено. Доступны варианты квантования от Q2_K до Q8_0 и IQ4_XS, размером примерно от 11,2 до 32,1 ГБ. Модель предназначена для локального запуска в совместимых средах, поддерживающих GGUF, а заявленная область применения включает перевод. Указаны следующие языки: китайский, английский, французский, португальский, испанский, японский, турецкий, русский, арабский, корейский, тайский, итальянский, немецкий, вьетнамский, малайский, индонезийский, тагальский, хинди, польский, чешский, нидерландский, кхмерский, бирманский, персидский, гуджарати, урду, телугу, маратхи, иврит, бенгальский, тамильский, украинский, тибетский, казахский, монгольский и уйгурский. Модальность, размер контекста и точная архитектура в README не указаны. Сильная сторона публикации — широкий выбор уровней квантования: Q4_K_S и Q4_K_M отмечены как быстрые и рекомендуемые, Q6_K — как вариант с очень хорошим качеством, а Q8_0 — как вариант с лучшим качеством среди перечисленных. Более сильное сжатие уменьшает требования к памяти, но может снижать качество; для Q3_K_M отдельно отмечено более низкое качество. Лицензия — Apache-2.0.
WindyTranslate/translate-ase-en — модель машинного перевода, опубликованная Windstorm Labs и основанная на Helsinki-NLP/opus-mt-ase-en. Это дообученная MarianMT-модель с 37,9 млн параметров, принимающая текст на языке ase и переводящая его на английский. Контекст модели — 512 токенов. Разработчики объединили с базовыми весами LoRA-дообучение на параллельном корпусе; в репозитории указано изменение 36 из 254 тензоров. Модель предназначена для перевода в направлении ase → en и загружается через Transformers из safetensors. Лицензия — Apache-2.0. Качество перевода пока не оценивалось бенчмарками, поэтому пригодность результата для конкретных задач не подтверждена. Модель поддерживает только одно направление перевода.
WindyTranslate/translate-en-bcl — модель машинного перевода от Windstorm Labs, дообученная на параллельных данных на основе Helsinki-NLP/opus-mt-en-bcl. Она переводит текст с английского на бикольский язык. Модель построена на архитектуре MarianMT, содержит 55,1 млн параметров и рассчитана на контекст до 512 токенов. Веса получены слиянием LoRA-дообучения с базовой моделью; репозиторий содержит сборку Transformers в формате safetensors. Модель подходит для перевода отдельных текстов и фраз с английского на бикольский. Для другой языковой пары она не предназначена. Качество перевода пока не оценено: проверка подтвердила, что выходной текст соответствует заявленному языку, но не измеряла точность перевода. Модель распространяется по лицензии Apache-2.0.
WindyTranslate/translate-en-bnt — модель машинного перевода от Windstorm Labs, дообученная на базе Helsinki-NLP/opus-mt-en-bnt. Это трансформер MarianMT с 56,8 млн параметров; веса LoRA-дообучения на параллельном корпусе объединены с базовыми весами. Модель принимает текст на английском и переводит его на язык bnt; поддерживает только это направление перевода и имеет контекст до 512 токенов. Репозиторий содержит сборку для Transformers в формате safetensors. Лицензия — Apache-2.0. Качество модели пока не оценивалось бенчмарками, поэтому изменение весов подтверждает происхождение модели, но не улучшение качества перевода.
WindyTranslate/translate-en-ho — модель машинного перевода от Windstorm Labs для перевода текста с английского языка на хауса. Она основана на Helsinki-NLP/opus-mt-en-ho и дообучена методом LoRA на параллельном корпусе; адаптер объединён с базовыми весами. Модель использует архитектуру MarianMT, содержит 46,9 млн параметров, принимает текстовый ввод, выдаёт текст и рассчитана на контекст до 512 токенов. Репозиторий содержит сборку Transformers в формате safetensors. Модель подходит для перевода отдельных текстов и интеграции англо-хаусского перевода в приложения. Качество перевода не оценено; проверка подтвердила язык вывода, но не его точность. Поддерживается только направление en→ho. Лицензия — Apache-2.0.