Компактная версия mT5 для генерации и преобразования текста преимущественно на украинском языке с базовой поддержкой английского.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
kravchenko/uk-mt5-base — компактная языковая модель семейства mT5, созданная для работы преимущественно с украинским языком и частично с базовым английским. Автор описывает её как результат сжатия mT5-base с сокращением словаря и числа параметров.
Модель построена на архитектуре MT5ForConditionalGeneration и содержит 122,1 млн параметров по метаданным. Карточка сообщает о сокращении словаря с 250 тыс. до 30 тыс. токенов и размера модели с 2,2 до 0,95 ГБ; эти результаты приведены для описанного автором процесса сжатия и могут не совпадать с текущим опубликованным чекпойнтом. Формат весов — PyTorch. Сценарии применения и условия лицензии в доступных данных не описаны.
Английский язык описан только как базовый; карточка не приводит оценок качества или подробностей обучающих данных. Лицензия и условия коммерческого использования в доступных данных не указаны.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
The aim is to compress the mT5-base model to leave only the Ukrainian language and some basic English.
Reproduced the similar result (but with another language) from this medium article.
Results:
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
У модели не указана задача.