Преобразованная в формат MLX английская модель Orpheus от Canopy Labs для синтеза речи из текста.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
mlx-community/orpheus-3b-0.1-ft-bf16 — версия модели Orpheus от Canopy Labs, преобразованная сообществом mlx-community из canopylabs/orpheus-3b-0.1-ft в формат MLX с помощью mlx-audio 0.0.3. Это плотная авторегрессионная модель семейства LlamaForCausalLM с 3,3 млрд параметров; она предназначена для синтеза речи по тексту на английском языке. В карточке показан пример генерации MP3 с голосом tara и настройкой температуры.
Модель можно использовать для озвучивания текста в приложениях, где выполняется MLX, например для генерации голосовых сообщений или аудиоверсий текстов. Контекстная длина по метаданным — 131 072 токена. Репозиторий распространяется по лицензии Apache-2.0.
Это преобразованная копия дообученной модели, а не самостоятельное дообучение MLX Community. Доступная карточка не описывает качество речи, полный набор голосов и языков или ограничения при использовании; поэтому эти свойства нельзя оценить по имеющимся сведениям.
Карточка не приводит оценки качества и не перечисляет доступные голоса полностью. Поддержка языков, кроме английского, и эксплуатационные ограничения не описаны.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
This model mlx-community/orpheus-3b-0.1-ft-bf16 was converted to MLX format from canopylabs/orpheus-3b-0.1-ft using mlx-audio version 0.0.3.
pip install -U mlx-audio
python -m mlx_audio.tts.generate --model mlx-community/orpheus-3b-0.1-ft-bf16 --text "Hello world" --voice tara --temperature 0.6 --audio_format mp3```
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм · mlx
MLX-модели работают только на Apple Silicon.