Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
English Whisper Non-Standard Medium — модель распознавания речи, созданная дообучением OpenAI Whisper Medium на английской речи с нестандартными и региональными произносительными вариантами кенийских говорящих. Она предназначена для преобразования такой речи в текст, в том числе в сценариях, где стандартное произношение английского представлено недостаточно. Архитектура — WhisperForConditionalGeneration с 455,8 млн параметров; модель принимает аудио и выдаёт текст. В карточке указаны английский язык и дообучение на подмножестве Mozilla Common Voice и специально отобранной кенийской английской речи.
В README приведены метрики оценки: WER 0,1484 на dev и 0,1107 на test, CER 0,0810 на dev и 0,0613 на test. Эти результаты относятся к указанной оценке и не гарантируют такую же точность на других акцентах, акустических условиях или типах записей. Модель распространяется по лицензии Apache-2.0.
Сценарии применения
расшифровка английской речи с кенийским акцентом
транскрибация записей с региональными вариантами английского
распознавание речи кенийских говорящих в аудиозаписях
Ограничения
Модель настроена на английскую речь, в особенности на кенийские региональные и нестандартные произносительные варианты; качество на других языках, акцентах и акустических условиях не установлено. Приведённые WER и CER относятся только к указанным dev- и test-наборам.
Для каких профессий подходит5
Разделы каталога профессий, в задачах которых используется эта модель