/ Модель

Характеристики

Контекст
1 024 токена
Параметры
29,4 млн
Лицензия
BSD 3-Clause
Архитектура
whisper · dense
Опубликована
18 фев 2024

PhoWhisper-tiny

Распознавание речиАудио → текст5 профессий

Компактная модель Whisper для транскрибации вьетнамской речи с разными акцентами.

3 546скачиваний за 30 дней17лайковвеса обновлены12 ноя 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Распознавание речи» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

PhoWhisper-tiny — модель распознавания вьетнамской речи, разработанная Thanh-Thien Le, Linh The Nguyen и Dat Quoc Nguyen. Это версия семейства PhoWhisper, созданная дообучением многоязычной Whisper на 844-часовом наборе данных с различными вьетнамскими акцентами.

Модель предназначена для автоматической транскрибации вьетнамской речи. В исследовании авторов PhoWhisper показала высокие результаты на тестовых наборах для распознавания вьетнамской речи. Вариант tiny содержит 29,4 млн параметров и использует архитектуру Whisper; репозиторий содержит веса PyTorch.

Лицензия — BSD 3-Clause. Авторы просят цитировать статью PhoWhisper при публикации результатов или включении модели в программное обеспечение.

Сценарии применения

  • транскрибация вьетнамской речи
  • распознавание вьетнамской речи с региональными акцентами
  • создание субтитров для вьетнамских аудио- и видеозаписей

Ограничения

Модель ориентирована на вьетнамскую речь; точность для других языков не подтверждена. Заявленные авторами результаты относятся к тестовым наборам из их исследования.

Для каких профессий подходит5

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

PhoWhisper: Automatic Speech Recognition for Vietnamese

We introduce PhoWhisper in five versions for Vietnamese automatic speech recognition. PhoWhisper's robustness is achieved through fine-tuning the multilingual Whisper on an 844-hour dataset that encompasses diverse Vietnamese accents. Our experimental study demonstrates state-of-the-art performances of PhoWhisper on benchmark Vietnamese ASR datasets. Please cite our PhoWhisper paper when it is used to help produce published results or is incorporated into other software:

@inproceedings{PhoWhisper,
  title     = {{PhoWhisper: Automatic Speech Recognition for Vietnamese}},
  author    = {Thanh-Thien Le and Linh The Nguyen and Dat Quoc Nguyen},
  booktitle = {Proceedings of the ICLR 2024 Tiny Papers track},
  year      = {2024}
}

For further information or requests, please go to PhoWhisper's homepage!

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
WhisperForConditionalGeneration
Ревизия весов
cc51d32

0 моделей