Характеристики

Опубликована: 12 апр 2023

Ссылки

Hugging Face

RVC_datealive

Wanlau

Обработка аудиоАудио → аудио

Коллекция моделей RVC преобразует аудиозапись в голос одного из персонажей Date A Live.

0скачиваний за 30 дней25лайковвеса обновлены29 апр 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Коллекция моделей преобразования голоса RVC для персонажей Date A Live. Модели подготовлены на основе голосовых данных из игры Date A Live: Rio Reincarnation и предназначены для преобразования аудио в голос выбранного персонажа с использованием RVC WebUI. В карточке перечислены персонажи Тока, Оригами, Ёшино, Куруми, Котори, Риннэ, Мария, Кагуя, Юдзуру, Мику, Марина и Рио.

В репозитории представлены варианты для RVC v1 и v2; версия v2 использует 768-мерные признаки 12-слойного Hubert вместо 256-мерных признаков 9-слойного Hubert с final_proj, а также три периодических дискриминатора. Файлы опубликованы в формате PyTorch. Модель предназначена для преобразования аудио, а не для распознавания или генерации текста; сведения о лицензии в доступных данных отсутствуют.

Сценарии применения

преобразование записанной речи в голос персонажа Date A Live
создание фанатских озвучек персонажей
эксперименты с преобразованием голоса через RVC WebUI

Ограничения

Модели рассчитаны на преобразование голосов персонажей Date A Live и требуют совместимого RVC WebUI. Условия лицензирования и ограничения на коммерческое использование в доступных данных не приведены.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Voice Conversion Models for Date A Live

English | 中文简体

Using RVC (Retrieval-based-Voice-Conversion-WebUI)

RVC

RVC models for Date A Live, using voice data from Date A Live: Rio Reincarnation.

These models are aiming to facilitate communication and learning. Engaging in illegal activities, is strictly prohibited.

*_v2 for v2, others for v1.

(the v2 version model has changed the input from the 256 dimensional feature of 9-layer Hubert+final_proj to the 768 dimensional feature of 12-layer Hubert, and has added 3 period discriminators)

The file total_fea.npy has been removed, because it is not necessary in the new version of RVC.