Дообученная Wav2Vec2-модель для принудительного выравнивания узбекской речи с текстом в WhisperX.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Распознавание речи» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
Модель AlexAnoshka/wav2vec2-xls-r-uzbek-cv8 — зеркало lucio/xls-r-uzbek-cv8 для принудительного выравнивания узбекской речи в WhisperX через параметр --align_model. Это дообученная модель семейства Wav2Vec2 с архитектурой Wav2Vec2ForCTC и 402,7 млн параметров; репозиторий содержит веса в формате safetensors и токенизатор.
Модель предназначена для выравнивания узбекской речи с текстом при создании субтитров и обработке аудиозаписей. В README указано, что стандартная модель выравнивания WhisperX для узбекского отсутствует, а facebook/mms-1b-all без узбекского адаптера выравнивает речь по-английски. Лицензия — Apache-2.0. Пятиграммная языковая модель и артефакты обучения в зеркало не включены.
Модель предназначена для узбекского языка; README указывает, что пятиграммная языковая модель и артефакты обучения в репозиторий не включены.
README от автора на Hugging Face, как он его опубликовал
Зеркало lucio/xls-r-uzbek-cv8 для forced alignment в WhisperX (--align_model).
Перенесены только веса в safetensors и токенайзер; 5-gram LM и артефакты обучения исключены.
Зачем: у whisperx нет дефолтной align-модели для uz, а facebook/mms-1b-all грузится без
узбекского адаптера, то есть выравнивает по английскому.
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…