/ Модель

Характеристики

Параметры
3,5 млн
Лицензия
MIT
Архитектура
vits · dense
Базовая модель
mms-tts-div
Библиотека
transformers
Опубликована
3 июн 2024

mms-tts-div-finetuned-md-f01

Генерация аудиоТекст → аудио3 профессии

Небольшая VITS-модель, синтезирующая женскую речь на дивехи из текста, записанного письмом тхана.

42 991скачиваний за 30 дней0лайковвеса обновлены12 июн 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Синтез речи» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели сгенерируют результат по каждой задаче. Опубликованный тест появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель alakxender/mms-tts-div-finetuned-md-f01 разработана для синтеза речи на дивехи. Это дообученная на подборке синтетической речи версия архитектуры MMS-TTS на основе VITS; она преобразует текст на дивехи, записанный письмом тхана, в аудио женским голосом. Модель содержит 3,5 млн параметров и доступна в формате Safetensors для библиотеки Transformers.

Модель подходит для озвучивания коротких текстов на дивехи и создания женской синтетической речи. В карточке приведена оценка UTMOS 2,349 по трём образцам, что указывает на заметно синтетическое звучание в этой небольшой оценке. Модель распространяется по лицензии MIT.

Сценарии применения

  • озвучивание текстов на дивехи женским голосом
  • создание синтетической речи на дивехи для аудиоконтента
  • генерация речевых примеров для приложений на дивехи

Ограничения

В карточке указана средняя оценка UTMOS 2,349 по трём образцам, поэтому качество звучания может быть заметно синтетическим; оценка основана на небольшой выборке.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Divehi TTS – Female Voice (VITS-based)

This is a fine-tuned VITS (Variational Inference with adversarial learning for end-to-end Text-to-Speech) model for Divehi speech synthesis. The model produces female voice audio from Thaana-scripted Divehi text. Fine-tuned from Meta’s MMS-TTS architecture using a curated dataset of synthetic Divehi speech.

Model Details

FieldValue
Model IDalakxender/mms-tts-div-finetuned-md-f01
Base ArchitectureMMS-TTS (VITS)
LanguageDivehi (dv)
VoiceFemale
Sampling Rate16 kHz
TokenizerVITSTokenizer
Inference EngineTransformers (🤗 Hugging Face)

Usage

from transformers import VitsModel, VitsTokenizer
import torchaudio

tokenizer = VitsTokenizer.from_pretrained("alakxender/mms-tts-div-finetuned-md-f01")
model = VitsModel.from_pretrained("alakxender/mms-tts-div-finetuned-md-f01")

text = "މޫސުން ވަރަށް ގޯސްވެ، ފުވައްމުލަކުން ފެށިގެން އައްޑުއަށް އޮރެންޖް އެލާޓް ނެރެފި"
inputs = tokenizer(text, return_tensors="pt")
waveform = model.generate(**inputs).waveform[0]

torchaudio.save("output.wav", waveform.unsqueeze(0), 16000)

Evaluation Summary

  • Model: alakxender/mms-tts-div-finetuned-md-f01
  • Evaluated Samples: 3
  • Avg Estimated MOS (UTMOS): 2.349
    {
      "5": "Excellent (very natural)",
      "4": "Good (mostly natural)",
      "3": "Fair (some robotic quality)",
      "2": "Poor (noticeably unnatural)",
      "1": "Bad (unintelligible or very synthetic)"
    }
    
  • Artifacts:
    • 🎵 Audio: outputs/audio/
    • 📊 Spectrograms: outputs/spectrograms/
    • 📄 Report: outputs/report.txt
    • 📈 MOS Scores: outputs/mos_scores.txt

Acknowledgements

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры
VitsModel
Ревизия весов
e490b1c

0 моделей