Характеристики

Лицензия: CC BY-NC 4.0
Опубликована: 7 окт 2026

Ссылки

Hugging Face

ghana-vc-Chumburung_ncu

ghanaopenai

Обработка аудиоАудио → аудио

Модель преобразует речь на чумбурунге в голос Zephyr, стараясь сохранить исходный язык.

0скачиваний за 30 дней0лайковвеса обновлены8 окт 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель ghanaopenai/ghana-vc-Chumburung_ncu предназначена для преобразования голоса в речи на языке чумбурунг (ncu) в голос Zephyr с сохранением исходного языка. Она разработана на базе Seed-UVIT-Whisper-Small-Wavenet и дообучена для преобразования речи на синтетических данных Chumburung из набора ghanaopenai/ghana-synthetic-speech. В репозитории опубликованы веса PyTorch ft_model.pth — чекпойнт после 1 000 шагов обучения — и конфигурация модели.

Модель принимает аудио с речью и выдаёт аудио с преобразованным голосом. Для запуска README предлагает библиотеку ghana-vc, которая автоматически выбирает эту модель по имени конфигурации Chumburung_ncu. При выборе чекпойнта авторы сравнивали варианты на 500–3 500 шагах обучения для языка асанте-тви и выбрали шаг 1 000 за более чёткое произношение по оценке character error rate с помощью Omnilingual ASR CTC-300M. Лицензия CC BY-NC 4.0 допускает использование с указанием авторства, но запрещает коммерческое применение.

Сценарии применения

преобразование голоса в записи речи на чумбурунге
озвучивание речи на чумбурунге голосом Zephyr
создание голосовых примеров для чумбурунга с преобразованным тембром

Ограничения

Модель специализирована на речи на чумбурунге и преобразовании в голос Zephyr; качество для других языков не заявлено. Лицензия CC BY-NC 4.0 запрещает коммерческое использование.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

ghana-vc-Chumburung_ncu

Voice conversion for Chumburung (ncu). An audio-to-audio model that converts speech into the Zephyr voice while preserving the language.

This checkpoint is dedicated to Chumburung: it was fine-tuned only on Chumburung (ncu) clips from ghanaopenai/ghana-synthetic-speech, starting from the zero-shot seed-uvit-whisper-small-wavenet base. Use it to convert audio in Chumburung. For other languages — or as a cross-lingual fallback — use ghanaopenai/ghana-vc.

Use with ghana-vc

pip install git+https://github.com/GhanaNLP/ghana-vc

export HF_TOKEN=hf_...
ghana-vc convert \
  --dataset <org>/<audio-dataset> \
  --output  <org>/<result> \
  --config-name Chumburung_ncu \
  --num-samples 100

The library auto-selects this model when the dataset/config name matches.

Files

File	Description
`ft_model.pth`	Fine-tuned DiT weights (step 1,000)
`config_dit_mel_seed_uvit_whisper_small_wavenet.yml`	Model / training config
`ref_zephyr.wav`	Reference utterance of the Zephyr voice in Chumburung
`LICENSE`	Upstream Seed-VC GPL-3.0 text, retained for attribution

Training

Dataset: ghanaopenai/ghana-synthetic-speech config Chumburung_ncu (Chumburung)
Base: seed-uvit-whisper-small-wavenet (zero-shot)
Weights: the step-1,000 checkpoint. Comparing checkpoints from 500 to 3,500 steps on Asante Twi, step 1,000 kept pronunciation clearest (lowest character error rate with Omnilingual ASR CTC-300M), so it is the one published.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

Обработка «аудио → аудио» пока не поддерживается.

Ревизия весов: 2734bb7