/ Модель

Характеристики

Лицензия
CC BY-NC 4.0
Опубликована
7 окт 2026

ghana-vc-Paasaal_sig

Обработка аудиоАудио → аудио

Модель преобразует речь на паасаал в голос Zephyr, сохраняя исходный язык.

0скачиваний за 30 дней0лайковвеса обновлены8 окт 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

ghanaopenai/ghana-vc-Paasaal_sig — модель преобразования речи для языка паасаал (sig), разработанная ghanaopenai. Она меняет голос говорящего на голос Zephyr, сохраняя язык исходной речи; модель предназначена для обработки аудио на паасаал.

Модель основана на zero-shot архитектуре Seed-UVIT с компонентами Whisper Small и WaveNet и дообучена на примерах паасаал из набора ghanaopenai/ghana-synthetic-speech. Опубликован чекпойнт после 1 000 шагов обучения; в описании отмечено, что этот вариант сохранял наиболее ясное произношение среди сравнивавшихся чекпойнтов. Доступны веса PyTorch и эталонная запись голоса Zephyr на паасаал. Лицензия CC BY-NC 4.0 разрешает использование с указанием авторства, но некоммерческое.

Модель принимает аудио и выдаёт преобразованное аудио. Она специализирована на паасаал и не предназначена для других языков; для них автор рекомендует отдельную модель ghanaopenai/ghana-vc. Для автоматического выбора чекпойнта используется конфигурация Paasaal_sig в библиотеке ghana-vc.

Сценарии применения

  • преобразование голоса в аудиозаписях на паасаал
  • озвучивание речи на паасаал голосом Zephyr
  • смена голоса в синтетической речи на паасаал

Ограничения

Модель специализирована на паасаал; для других языков автор рекомендует ghanaopenai/ghana-vc. Опубликован чекпойнт после 1 000 шагов обучения, а лицензия CC BY-NC 4.0 ограничивает использование некоммерческими целями.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

ghana-vc-Paasaal_sig

Voice conversion for Paasaal (sig). An audio-to-audio model that converts speech into the Zephyr voice while preserving the language.

This checkpoint is dedicated to Paasaal: it was fine-tuned only on Paasaal (sig) clips from ghanaopenai/ghana-synthetic-speech, starting from the zero-shot seed-uvit-whisper-small-wavenet base. Use it to convert audio in Paasaal. For other languages — or as a cross-lingual fallback — use ghanaopenai/ghana-vc.

Use with ghana-vc

pip install git+https://github.com/GhanaNLP/ghana-vc

export HF_TOKEN=hf_...
ghana-vc convert \
  --dataset <org>/<audio-dataset> \
  --output  <org>/<result> \
  --config-name Paasaal_sig \
  --num-samples 100

The library auto-selects this model when the dataset/config name matches.

Files

FileDescription
ft_model.pthFine-tuned DiT weights (step 1,000)
config_dit_mel_seed_uvit_whisper_small_wavenet.ymlModel / training config
ref_zephyr.wavReference utterance of the Zephyr voice in Paasaal
LICENSEUpstream Seed-VC GPL-3.0 text, retained for attribution

Training

  • Dataset: ghanaopenai/ghana-synthetic-speech config Paasaal_sig (Paasaal)
  • Base: seed-uvit-whisper-small-wavenet (zero-shot)
  • Weights: the step-1,000 checkpoint. Comparing checkpoints from 500 to 3,500 steps on Asante Twi, step 1,000 kept pronunciation clearest (lowest character error rate with Omnilingual ASR CTC-300M), so it is the one published.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

Обработка «аудио → аудио» пока не поддерживается.

Ревизия весов
4a2a269

0 моделей