/ Модель

Характеристики

Лицензия
CC BY 4.0
Архитектура
parakeet_tdt · dense
Опубликована
18 сен 2026

parakeet-redux

Распознавание речиАудио → текст9 профессий

Компактная многоязычная модель Moondream на основе Parakeet-TDT-0.6B-v3 для быстрого распознавания речи и транскрибации длинных аудиозаписей.

16 552скачиваний за 30 дней280лайковвеса обновлены23 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Распознавание речи» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки1

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

  • hf-audio/open-asr-leaderboard

    score · ниже — лучше

    Результат

    6,05

    librispeech_clean_wer 1,96tedlium_wer 2,51spgispeech_wer 4,01
    Hugging Face Leaderboards

    Публичная таблицаревизия не подтверждена

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Moondream Parakeet Redux — компактная модель автоматического распознавания речи, созданная на основе Parakeet-TDT-0.6B-v3 от NVIDIA. Она сохраняет исходную архитектуру и токенизатор, но веса энкодера представлены значениями −1, 0 и +1 (1,58 бита); размер весов — 178 МБ. Для запуска README рекомендует Photon, который использует AVX-512 VNNI на x86, NEON на ARM и Metal на Apple-устройствах.

Модель предназначена для преобразования речи в текст, включая многоязычные записи и длинные аудио. Встроенная голова определения речевой активности помогает Photon разделять длинные записи на фрагменты до 30 секунд. В опубликованных сравнениях Redux близка к исходной модели на английском, показывает лучшие результаты на FLEURS и длинных выступлениях, но сильнее теряет точность при фоновом шуме. Заявленные скорости зависят от оборудования и среды Photon.

В карточке указана лицензия CC-BY-4.0. Модель поддерживает 25 языков, включая русский; метаданные перечисляют языковые коды для 23 из них.

Сценарии применения

  • транскрибация записей на русском и других поддерживаемых языках
  • расшифровка длинных выступлений и лекций
  • распознавание речи в подкастах и видео
  • транскрибация деловых встреч и звонков
  • локальная пакетная обработка аудио на CPU или Apple-устройствах

Ограничения

При фоновом шуме точность заметно уступает исходной Parakeet-TDT-0.6B-v3; на некоторых англоязычных наборах и деловой речи Redux также показывает более высокий WER. Заявленные скорость и способ работы зависят от Photon и аппаратного обеспечения.

Для каких профессий подходит9

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Moondream Parakeet Redux

A 1.58-bit version of parakeet-tdt-0.6b-v3. Same architecture, same tokenizer, but every encoder weight is -1, 0 or +1. It fits in 178 MB, runs at 113× real time on eight x86 CPU cores, 2.5× the fastest other Parakeet runtime we measured, and stays within 0.3 WER of the original on English while beating it on the 25-language FLEURS set and on long-form audio.

parakeet-tdt-0.6b-v3parakeet-redux
Open ASR Leaderboard, 7 English sets (WER %)6.266.55
FLEURS, 25 languages (WER %)11.6210.56
Business speech, AA-WER style (WER %)6.156.96
Background noise, 9 MUSAN conditions (WER %)6.729.04
TED-LIUM long-form (WER %)2.712.51
Weights1.2 GB178 MB

Its sibling Parakeet Ultra is the full-precision version of the same architecture, trained further, for GPUs: better than the original on every benchmark. Read the release post for the story behind both models.

Usage

Run it with Photon, which reads the packed weights directly: AVX-512 VNNI on x86, NEON on ARM, Metal on Apple GPUs. Every speed number on this page is Photon.

# pip install moondream  (2.4.0 or later)
import moondream as md

# device: "cpu", "mps" or "cuda"; leave it out to take CUDA,
# then Apple silicon, then the CPU
with md.photon("moondream/parakeet-redux", device="cpu") as speech:
    result = speech.transcribe(audio="speech.wav")
    print(result["text"])
    # From the undersurface of the clouds there are continual
    # emissions of lurid light. Electric matter is in continual
    # evolution from their component molecules. The gaseous ...

    # timestamps="segment": one entry per sentence, with its start
    # and end in seconds
    result = speech.transcribe(audio="speech.wav", timestamps="segment")
    for segment in result["segments"]:
        print(segment["start"], segment["end"], segment["text"])
    # 0.32 5.12 From the undersurface of the clouds there are ...
    # 5.12 9.92 Electric matter is in continual evolution from ...
    # 9.92 21.04 The gaseous elements of the air need to be ...

    # timestamps="word": the same sentences, each with the start
    # and end of every word
    result = speech.transcribe(audio="speech.wav", timestamps="word")
    for word in result["segments"][0]["words"][:3]:
        print(word["start"], word["end"], word["word"])
    # 0.32 0.56 From
    # 0.56 0.72 the
    # 0.72 1.44 undersurface

Performance

Real-time factor: seconds of audio transcribed per second of wall clock, one utterance at a time, higher is faster. The other rows are the fastest other ways we found to run Parakeet on the same machine and the same audio.

How this was measured

One utterance at a time. Incumbents: parakeet.cpp (ggml), sherpa-onnx and onnx-asr (ONNX Runtime) and, on the Mac, parakeet-mlx, each at its own defaults. x86: LibriSpeech test-clean (2,620 utterances), every runtime on the same 8 cores. Apple silicon: a 50-utterance slice of LibriSpeech dev-clean, with cool-downs between runs. WER is scored the same way as the benchmarks below.

x86 CPU

AMD EPYC 9575F (Zen 5, up to 5.0 GHz, AVX-512), 8 physical cores of one chiplet, DDR5-6000, Ubuntu 22.04.

runtimeweightsreal timeWER
Photon, this modelternary, 178 MB113×1.94
parakeet.cpp (ggml)q8_0, 0.94 GB45×1.51
sherpa-onnx (ONNX Runtime)int8, 0.67 GB42×1.97
onnx-asr (ONNX Runtime)int8, 0.67 GB28×1.93

Apple silicon

MacBook Air with the Apple M2 (4 performance and 4 efficiency CPU cores, 10-core GPU), 16 GB unified memory, macOS 15.

runtimeweightsCPUGPU
Photon, this modelternary, 178 MB38×43×
parakeet.cpp (ggml)q8_0, 0.94 GB12×38× (Metal)
parakeet.cpp (ggml)f16, 1.44 GB9×39× (Metal)
parakeet-mlxfp32, 2.51 GB—37×
onnx-asr (ONNX Runtime)int8, 0.67 GB33×—
sherpa-onnx (ONNX Runtime)int8, 0.67 GB28×—

Benchmarks

Word error rate in percent, lower is better. parakeet-redux is better than the original on FLEURS and on long-form audio, close to it on English, and behind it in noise. Both models are scored on the same files with the Open ASR Leaderboard's own pipeline as of September 2026 (its normalizers and compound-merging alignment, with the FLEURS references prepared as the leaderboard's text column is). parakeet-redux runs in Photon on an NVIDIA GPU, the original in NeMo in bf16.

Open ASR Leaderboard

The seven English test sets of the Hugging Face Open ASR Leaderboard: audiobooks (LibriSpeech), meetings (AMI), earnings calls (Earnings-22), podcasts and YouTube (GigaSpeech), financial calls (SPGISpeech) and parliament (VoxPopuli).

setparakeet-tdt-0.6b-v3parakeet-redux
LibriSpeech test-clean1.521.96
LibriSpeech test-other3.134.34
AMI10.8610.80
Earnings-2210.759.95
GigaSpeech8.058.73
SPGISpeech3.634.01
VoxPopuli5.886.07
average6.266.55

FLEURS

The FLEURS test split: read Wikipedia sentences, a few hundred per language, for all 25 languages the model supports.

languageparakeet-tdt-0.6b-v3parakeet-redux
Bulgarian11.9011.23
Croatian10.939.26
Czech10.8510.25
Danish16.7815.94
Dutch6.187.45
English4.254.90
Estonian13.239.15
Finnish11.0510.38
French4.817.71
German4.135.42
Greek35.7132.48
Hungarian13.6514.15
Italian2.613.24
Latvian21.3812.80
Lithuanian21.0917.27
Maltese19.1313.65
Polish6.708.59
Portuguese4.654.99
Romanian11.5410.32
Russian5.917.91
Slovak9.467.26
Slovene21.7616.21
Spanish3.123.71
Swedish13.7512.71
Ukrainian5.947.06
average11.6210.56

Business speech (AA-WER style)

The AMI and VoxPopuli test sets with the Artificial Analysis cleaning applied, and Earnings-22 scored in 30-second chunks joined per call, the way the AA-WER benchmark does it.

setparakeet-tdt-0.6b-v3parakeet-redux
AMI (cleaned)9.529.14
VoxPopuli (cleaned)3.023.86
Earnings-22, 30-second chunks5.907.89
average6.156.96

Background noise

The clean sets with MUSAN noise (the half of the corpus not used for training) mixed in at a fixed signal-to-noise ratio; 0 dB means the noise is as loud as the speech.

setparakeet-tdt-0.6b-v3parakeet-redux
LibriSpeech test-other, 10 dB4.125.66
LibriSpeech test-other, 5 dB5.497.32
LibriSpeech test-other, 0 dB9.0610.95
FLEURS German, 10 dB5.788.97
FLEURS German, 5 dB8.0712.36
FLEURS German, 0 dB14.4519.18
FLEURS Spanish, 10 dB3.994.46
FLEURS Spanish, 5 dB4.125.25
FLEURS Spanish, 0 dB5.447.22
average6.729.04

Noise is where the gap to the original is widest: the ternary encoder's acoustic margin is thinner, and at low SNR it substitutes similar-sounding words more often. Dropped or invented content is not more frequent than the original's.

Long-form

Eleven complete TED-LIUM 3 talks of 10-20 minutes each. parakeet-redux transcribes them through Photon, whose segmenter cuts each talk at pauses found by the model's VAD head into segments of at most 30 seconds; the original runs NeMo's own long-audio path.

setparakeet-tdt-0.6b-v3parakeet-redux
TED-LIUM 3, 11 full talks of 10-20 minutes2.712.51

Notes

  • Based on parakeet-tdt-0.6b-v3 by NVIDIA. Languages, tokenizer and output conventions (punctuation, casing, numerals) are the original's.
  • Runs with Photon.
  • Long audio is segmented by the model itself: the weights carry a small voice-activity head on the encoder's subsampler, and Photon uses it to cut recordings at pauses into segments of at most 30 seconds. No external VAD model is needed.
  • License is CC-BY-4.0, same as the original.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Ревизия весов
2bf1286

0 моделей