/ Профессии
Универсальные способности и операции

I.15Доступность и ассистивные технологии

В разделе собраны самостоятельные задачи, где AI помогает делать цифровую и физическую среду доступнее для людей с различными ограничениями. Для каждого пункта отдельно указаны механизм, входы, результат и способ проверки.

ЗрениеАудиоЭмбеддингиТекст
AI-задач
17
в этой профессии
Подходящих моделей
8 953
по типу задач и модальности
Категория
I. Универсальные способности
Основные типы
ЗрениеАудиоЭмбеддинги

Рекомендованные модели

8 953 модели
Загрузки
Лайки
Дата выхода
6 151–6 180 из 8 953
mradermacher
Hy-MT2-1.8B-i1-GGUF

Hy-MT2-1.8B-i1-GGUF — квантованные GGUF-версии модели Hy-MT2-1.8B, разработанной Tencent и подготовленной пользователем mradermacher. Модель предназначена прежде всего для задач машинного перевода и локального запуска в приложениях, поддерживающих формат GGUF. Доступны варианты с разной степенью квантования и размером примерно от 0,6 до 1,6 ГБ, что позволяет выбирать между требованиями к памяти, скоростью и качеством. Заявлена поддержка китайского, английского, французского, португальского, испанского, японского, турецкого, русского, арабского, корейского, тайского, итальянского, немецкого, вьетнамского, индонезийского, малайского, филиппинского, хинди, польского, чешского, нидерландского, кхмерского, бирманского, персидского, гуджарати, урду, телугу, маратхи, иврита, бенгальского, тамильского, украинского, тибетского, казахского, монгольского и уйгурского языков. Архитектура, размер контекста и другие внутренние характеристики в карточке не указаны; из названия следует размер базовой модели около 1,8 млрд параметров. Сильной стороной является широкий набор языков и возможность запуска на устройствах с ограниченными ресурсами благодаря многочисленным квантованным вариантам. Качество зависит от выбранного типа квантования: в README отмечены компромиссы между размером, скоростью и точностью, а некоторые малые варианты характеризуются как низкокачественные. Модель ориентирована на перевод, поэтому её возможности для других задач и мультимодальность не заявлены. Распространение указано по лицензии Apache-2.0.

7850май 2026
textapache-2.0hugging-face
llm-jp
Llama-Mimi-8B

Llama-Mimi-8B — модель для работы с речью, разработанная командой LLM-jp. Она объединяет токенизатор Mimi и декодер-трансформер Llama, совместно моделируя последовательности чередующихся семантических и акустических токенов. Модель дообучена на базе meta-llama/Llama-3.1-8B и содержит около 7,5 млрд параметров. Модель предназначена для задач преобразования аудио в аудио. Обучение проводилось примерно на 240 тысячах часов англоязычного аудио. В описании отмечены высокая акустическая согласованность по оценке SALMon и сохранение идентичности говорящего. Контекст составляет до 131 072 токенов; архитектура — плотный декодер Llama, формат весов — safetensors. Для использования указаны Transformers, PyTorch и torchaudio. Лицензия — Llama 3.1 Community License. README не уточняет конкретные режимы преобразования аудио и ограничения применения; модель и обучающие данные ориентированы на английскую речь.

16912сент. 2025ctx131.1K
textllama3.1hugging-face
facebook
mms-tts-hus-dialect_centralveracruz

facebook/mms-tts-hus-dialect_centralveracruz — модель синтеза речи на языке уастек (Huastec), разработанная Facebook в рамках проекта Massively Multilingual Speech (MMS). Она преобразует входной текст в речевую аудиоволну и предназначена для генерации речи на варианте языка центрального Веракруса. Модель построена на архитектуре VITS и содержит 3,5 млн параметров. VITS объединяет текстовый энкодер, вероятностную модель длительности и декодер речи в сквозной системе синтеза; стохастический предиктор длительности позволяет получать разные ритмические варианты произношения. Для работы с моделью подходит библиотека Transformers версии 4.33 и новее. Одинаковый результат генерации требует фиксированного seed. Модель распространяется в форматах PyTorch и safetensors по лицензии CC BY-NC 4.0, которая ограничивает коммерческое использование. Она предназначена для одного языкового варианта; качество и область применимости за пределами синтеза речи на уастек в карточке не описаны.

920сент. 2023
textaudiocc-by-nc-4.0hugging-face
facebook
mms-tts-kog

facebook/mms-tts-kog — модель синтеза речи на языке Kogi (код kog), созданная Meta в рамках проекта Massively Multilingual Speech (MMS). Она преобразует входной текст в речевую аудиоволну и предназначена для озвучивания текста на Kogi. Модель использует архитектуру VITS: вариационный автоэнкодер с потоковым модулем, трансформерным текстовым энкодером, декодером HiFi-GAN и стохастическим предсказателем длительности. Для MMS обучается отдельная модель на каждый язык; размер этого чекпойнта — 3,5 млн параметров. Модель доступна через Transformers версии 4.33 и новее, веса представлены в форматах PyTorch и Safetensors. Генерация недетерминирована: для повторения того же результата нужно фиксировать seed. Лицензия CC BY-NC 4.0 разрешает использование с указанием авторства, но некоммерческое. Карточка не сообщает о голосовом клонировании или поддержке других языков.

950сент. 2023
textaudiocc-by-nc-4.0hugging-face
OpenMOSS-Team
MOSS-VL-Realtime-SGLANG

MOSS-VL-Realtime-SGLANG — совместимый пакет команды OpenMOSS для запуска мультимодальной модели MOSS-VL-Realtime через специализированный backend SGLang-Omni. Это не переобученная и не квантованная модель: сохранены исходные веса BF16 и токенизатор, а пакет адаптирует конфигурацию и интерфейсы для совместимости с Transformers 5.12.1. В основе — плотная архитектура MossVLForConditionalGeneration с отдельным визуальным кодировщиком, языковой частью и перекрёстным вниманием; модель содержит 11 млрд параметров и поддерживает контекст до 256 тыс. токенов. Модель предназначена для потокового понимания видео: она анализирует кадры по мере поступления, отвечает на вопросы о происходящем, учитывает временные метки, порядок и длительность событий, а также может обновлять ответы или сохранять молчание, если ответ не нужен либо визуальных данных недостаточно. Подходит для интерактивных видео- и голосовых приложений и сервисов потокового вывода. Основные языки карточки — английский и китайский; вход включает видео и текст, выход — текст. Для работы требуются совместимые версии Transformers, SGLang-Omni и PyTorch, а также специализированная интеграция MOSS-VL; универсальная установка SGLang-Omni её не содержит. Реальная задержка зависит от оборудования и настроек, а пропуск кадров и окна визуального KV ограничивают доступную историю. Для продолжения работы за пределами контекста приложению нужна собственная логика памяти. Лицензия — Apache-2.0.

1585сент. 2026ctx262.1K
textapache-2.0hugging-face
maxLWSv2
MotionAtlas-4B

MotionAtlas-4B — модель для понимания видео с фокусом на движении, представленная в работе MotionAtlas: Detailed Region Captioning for Motion-Centric Videos. Она формирует подробные текстовые описания движения в указанных областях видео, переходя от общих описаний ролика к анализу движения в конкретных регионах. Модель основана на плотной мультимодальной архитектуре Qwen3-VL и использует интерфейс диалога с визуальным вводом. MotionAtlas-4B предназначена для описания движения в выбранных областях видео и анализа видеороликов с учётом заданных регионов. Репозиторий содержит веса safetensors; заявленная задача Hugging Face — image-text-to-text. Модель лицензирована по Fair Noncommercial Research License, поэтому её использование ограничено условиями этой лицензии. Подробности запуска приведены во внешнем GitHub-репозитории и на странице проекта.

612июнь 2026ctx262.1K
textimagefair-noncommercial…hugging-face
ngoctham
neutts-2e

Карточка модели ngoctham/neutts-2e на Hugging Face совпадает с карточкой neuphonic/neutts-2e, поэтому описание составлено по ней. NeuTTS-2E — модель синтеза речи, разработанная Neuphonic для локального запуска на устройствах с ограниченными ресурсами. Она преобразует текст на английском языке в речь и позволяет выбирать одну из четырёх фиксированных голосовых персон и одну из шести эмоций либо нейтральную подачу. Модель использует компактную языковую модель для генерации токенов речи и аудиокодек NeuCodec. В README указано около 125 млн активных параметров базовой части и около 236 млн параметров всего; доступны квантованные версии GGUF. Модель оптимизирована для генерации в реальном времени на CPU и для встраиваемых устройств. Все создаваемые аудиофайлы по умолчанию содержат водяной знак Perth. Это ранняя альфа-версия, рассчитанная только на английский язык и фиксированный набор голосов; клонирование голоса не заявлено. Лицензия указана как other, поэтому условия использования следует сверять с файлами лицензии репозитория.

550июль 2026ctx32.8K
textotherhugging-face
B-K
umt5-thai-g2p-v2-0.5k

umt5-thai-g2p-v2-0.5k — модель B-K, дообученная на наборе B-K/thai-g2p для преобразования тайского текста в фонемную транскрипцию Международным фонетическим алфавитом (IPA). Это модель семейства UMT5 с архитектурой условной генерации текста; число параметров — 29,6 млн. Её применяют для преобразования слов и предложений на тайском языке в произношение, в том числе как этап предварительной обработки в конвейере синтеза речи. На оценочном наборе указаны loss 1,0480 и CER 0,0369. Модель может ошибаться, особенно на редких словах, неологизмах, сложных именах и данных, отличающихся от обучающего набора; неоднозначность тайского письма также может приводить к неверному произношению. Устойчивость на очень длинных или сложных предложениях может варьироваться. Распространяется по лицензии Apache-2.0.

3942июнь 2025
textapache-2.0hugging-face
OpenGVLab
VideoChat-Flash-Qwen2_5-7B_InternVideo2-1B

VideoChat-Flash-Qwen2_5-7B_InternVideo2-1B — видеоязыковая чат-модель OpenGVLab на основе InternVideo2-1B и Qwen2.5-7B. Она анализирует видео и отвечает на вопросы о его содержании; для взаимодействия рекомендуется английский, поскольку обучающий корпус преимущественно англоязычный, а понимание китайского базовое. Модель использует 16 токенов на кадр, а в README заявлена поддержка последовательностей примерно до 10 000 кадров благодаря расширению контекста методом YaRN. Метаданные указывают 7,1 млрд параметров и контекст 32 768 токенов; README описывает расширение до 128 тыс. токенов. Модель предназначена для диалога по видеоматериалам и задач понимания длинных видео. В карточке приведены результаты на MVBench, LongVideoBench и VideoMME, однако численные показатели в таблице относятся к вариантам модели с другими обозначениями, поэтому их нельзя уверенно приписать этому чекпойнту. Репозиторий содержит веса Safetensors для библиотеки Transformers. Лицензия — Apache-2.0.

18011февр. 2025ctx32.8K
textapache-2.0hugging-face
rabah2026
wav2vec2-large-xlsr-53-arabic-quran-v3

Это дообученная модель распознавания речи на архитектуре Wav2Vec2 Large XLSR-53, разработанная на базе jonatasgrosman/wav2vec2-large-xlsr-53-arabic. Она предназначена для распознавания чтения Корана в стилях таджвид и муратталь, включая поддержку османского письма и специальных символов ٱ и ٰ. В карточке указаны WER 4,41% для знакомых чтецов и 6,51% для новых, а точность сегментации по аятам превышает 98%. Модель принимает аудио и выдаёт распознанный текст на арабском языке. Репозиторий содержит веса в формате safetensors, размер модели — 402,7 млн параметров. Лицензия — Apache-2.0.

1290дек. 2025
textaudioapache-2.0hugging-face
Dr-AliGomaa
whisper-large-v3-ar-eg

Whisper-large-v3-ar-eg — модель автоматического распознавания речи, созданная Мохамедом Котбом под патронажем профессора Али Гомаа. Это дообученная на базе openai/whisper-large-v3 модель семейства Whisper с 905,2 млн параметров, принимающая аудио и выдающая текст. Она обучена на корпусах Корана и хадисов на литературном арабском, а также на египетской арабской речи. Модель предназначена для транскрибации религиозных текстов и египетской речи как вспомогательный инструмент и для исследований. Лучшая заявленная оценка для египетского арабского относится к речи того же диктора и формального регистра, что и обучающие данные; на спонтанной речи незнакомых дикторов качество заметно ниже универсальной базовой модели. Вывод использует арабскую орфографию без огласовок, числа записываются словами, временные метки не выдаются. Религиозные расшифровки следует сверять с каноническими письменными источниками. Лицензия — Apache-2.0.

440май 2025
textaudioapache-2.0hugging-face
luca0621
appgen-qwen3-uedgrpo-ngc-amex-pbrs-v32r12-step50

Карточка модели luca0621/appgen-qwen3-uedgrpo-ngc-amex-pbrs-v32r12-step50 на Hugging Face совпадает с карточкой namhokaist/appgen-qwen3-model-e-uedgrpo-awlegacy-stalesparse-v47-h200x8-s100-20260807-step70, поэтому описание составлено по ней. AppGen Qwen3-VL frozen SFT — A-variant arm E — это дообученная namhokaist модель на базе Qwen/Qwen3-VL-8B-Instruct, разработанная для исследований визуальных агентов Android. Она принимает изображения интерфейсов и текстовые инструкции, а затем формирует текстовые ответы для задач работы с экраном. Веса визуального энкодера и модулей выравнивания заморожены, а языковая модель и LM head дообучены; обучение проведено на наборах AppGen SFT и AMEX. Репозиторий содержит финальный чекпойнт в формате safetensors и распространяется по лицензии Apache-2.0. Модель предназначена для анализа интерфейсов Android и визуального заземления инструкций. В README не приводятся оценки качества, а статические бенчмарки не подтверждают успешность интерактивных задач AndroidWorld. Модель заявлена для исследований визуальных агентов и не предназначена для критически важных автономных развертываний.

110июль 2026ctx262.1K
textimageapache-2.0hugging-face
nvidia
bigvgan_v2_22khz_80band_256x

BigVGAN-v2 — нейронный вокодер, разработанный Sang-gil Lee, Wei Ping, Boris Ginsburg, Bryan Catanzaro и Sungroh Yoon. Этот репозиторий содержит вариант с частотой дискретизации 22 кГц, 80 мел-полосами и коэффициентом повышения частоты 256×. Модель генератора имеет архитектуру BigVGAN; размер конкретного чекпойнта в предоставленных данных не указан. Модель принимает мел-спектрограмму и синтезирует из неё звуковую волну. Она предназначена для вокодирования речи и других аудиосигналов; обучение BigVGAN-v2 охватывало речь на разных языках, окружающие звуки и музыкальные инструменты. Для ускорения инференса предусмотрено CUDA-ядро, но его сборка требует CUDA, nvcc и ninja. Репозиторий опубликован по лицензии MIT.

1.3M36июль 2024
audiomithugging-face
nvidia
EGM-4B-SFT

EGM-Qwen3-VL-4B-SFT — промежуточная контрольная точка первого этапа обучения модели Efficient Visual Grounding Language Models, разработанной NVIDIA. Это плотная мультимодальная модель на архитектуре Qwen3VLForConditionalGeneration, полученная дообучением Qwen/Qwen3-VL-4B-Thinking методом supervised fine-tuning на данных для визуального заземления с пошаговыми рассуждениями. Модель принимает изображения и текстовые запросы и формирует текстовые ответы с визуальным заземлением. Контрольная точка предназначена прежде всего для дальнейшего обучения с подкреплением по схеме GRPO; итоговая модель этого процесса — nvidia/EGM-4B. Модель поддерживает диалоговый режим и визуальный ввод. В README указана точность bfloat16 и размер текстового скрытого представления 2560. Репозиторий распространяется по лицензии Apache-2.0.

3221апр. 2026ctx8.2K
textimageapache-2.0hugging-face
Idan
fga-vqa-trainval

Idan/fga-vqa-trainval — модель для ответов на вопросы об изображениях, обученная по протоколу VQA v1 на объединённых наборах train2014 и val2014. Она использует архитектуру OpenEndedVQAModel с механизмом внимания Factor Graph Attention из работы CVPR 2019 и рассчитана на открытые вопросы по визуальному содержимому. Модель обучена на 351 596 вопросах с 36 региональными признаками изображения на пример и целевой функцией soft_ce, учитывающей оценки ответов десятью аннотаторами. Для инференса подаются токены вопроса и признаки изображения; модель выдаёт ответ. README не приводит оценку на test-dev: ответы тестового набора VQA v1 не опубликованы, а метрика появляется только после отправки предсказаний на сервер оценки. Модель распространяется под лицензией MIT.

70июль 2026
textimagemithugging-face
BBBBCHAN
LLaVA-Scissor-baseline-7B

LLaVA-Scissor-baseline-7B — базовая модель проекта LLaVA-Scissor, разработанного для исследования сжатия визуальных токенов в видеоязыковых моделях. Это мультимодальная модель на архитектуре LlavaQwenZipForCausalLM: она объединяет визуальный энкодер SIGLIP с языковой моделью Qwen2.5-7B-Instruct и дообучена на данных Oryx. Модель предназначена для понимания видео и ответов на текстовые запросы о его содержании; карточка также описывает запуск инференса без сжатия токенов. Размер модели — 7,1 млрд параметров, контекст — 32 768 токенов. В метаданных указаны английский и китайский языки. Модель распространяется под лицензией CC BY-NC 4.0, которая ограничивает коммерческое использование.

1803май 2025ctx32.8K
textcc-by-nc-4.0hugging-face
facebook
mms-tts-myy

facebook/mms-tts-myy — модель синтеза речи на языке макуна (myy), разработанная Facebook в рамках проекта Massively Multilingual Speech. Она преобразует текст на макуна в речевую аудиоволну и подходит для озвучивания текста на этом языке. Модель использует архитектуру VITS и обучена отдельно для макуна. Вариативный предиктор длительности позволяет синтезировать разные ритмические варианты речи из одного текста; поэтому результат может меняться между запусками, а для воспроизводимого синтеза требуется фиксированное начальное значение генератора. Размер модели — 3,5 млн параметров; она доступна в форматах PyTorch и Safetensors и поддерживается библиотекой Transformers начиная с версии 4.33. Лицензия CC-BY-NC-4.0 разрешает использование с указанием авторства, но запрещает коммерческое применение. Модель предназначена для языка макуна; качество синтеза и поддержка других языков не заявлены.

1050сент. 2023
textaudiocc-by-nc-4.0hugging-face
OpenMOSS-Team
MOSS-Audio-Tokenizer-Nano

MOSS-Audio-Tokenizer-Nano — компактный аудиотокенизатор команды OpenMOSS-Team для MOSS-TTS-Nano и совместимых рабочих процессов семейства MOSS-TTS. Это модель на основе причинного Transformer по архитектуре Cat, которая кодирует стереозвук в дискретную последовательность токенов и восстанавливает его из неё. В чекпойнте около 22 млн параметров; модель принимает и выдаёт стереозвук с частотой 48 кГц, а частота потока кодов составляет 12,5 Гц. Остаточный квантователь использует 16 кодовых книг по 1024 элемента и поддерживает битрейт от 0,125 до 2 кбит/с. Модель предназначена для компактного представления и восстановления речи, музыки и других аудиосигналов, включая потоковые сценарии с низкой задержкой. Её можно применять как аудиотокенизатор в генерации речи и других рабочих процессах, которым нужна дискретная аудиорепрезентация. Для загрузки реализации может потребоваться Transformers с включённым trust_remote_code. Репозиторий распространяется по лицензии Apache-2.0. README приводит сравнительные оценки качества восстановления на английском LibriSpeech и китайском AISHELL-2, а также на наборах AudioSet и MUSDB. Интерфейс требует стереовход формы (2, T) или (B, 2, T); заявлена потоковая обработка чанками, но непрерывное пакетное декодирование имеет ограничения по состоянию и параллельности: одна активная потоковая сессия декодирования на экземпляр модели, без непрерывного пакетного кодирования и одновременной работы нескольких сессий на одном экземпляре.

162K29апр. 2026
textembeddingapache-2.0hugging-face
OpenMOSS-Team
MOSS-Music-8B-Thinking

MOSS-Music-8B-Thinking — модель понимания музыки от MOSI.AI, команды OpenMOSS и Shanghai Innovation Institute. Она предназначена для анализа музыкальных записей и отвечает на вопросы о содержании и структуре трека; вариант Thinking дополнительно настроен на рассуждения при музыкальном анализе. Модель объединяет аудиоэнкодер MOSS-Audio-Encoder, адаптер модальности и языковую модель Qwen3-8B; общий размер составляет около 9,1 млрд параметров. Она принимает аудио и генерирует текст. В README описаны распознавание и транскрибирование вокала с временными метками, музыкальные описания, анализ жанра и инструментов, определение тональности, темпа и аккордов, разметка частей песни и ответы на вопросы по полной записи. Модель работает с английским и китайским языками. По заявлению разработчиков, обучение включает дополнительное предобучение на музыкальных данных, инструкционную настройку и настройку рассуждений для варианта Thinking. Модель распространяется по лицензии Apache-2.0. Данные о длине контекста и количественные оценки качества в предоставленных материалах отсутствуют.

96942апр. 2026ctx131.1K
textaudioapache-2.0hugging-face
TrevorJS
Muse-Glimmer-30B-uncensored

TrevorJS/Muse-Glimmer-30B-uncensored — производная версия мультимодальной модели Muse-Glimmer-30B, созданная методом abliteration: из текстового пути модели удалено поведение отказа. Это плотная модель с 52 слоями текстового декодера и отдельной башней компьютерного зрения ViT-G/14 на 1,9 млрд параметров; базовая модель содержит 29,6 млрд параметров. Модифицированы текстовые веса, а тензоры зрения скопированы без изменений. Модель предназначена для диалогов и задач «изображение—текст», включая ответы на вопросы по изображениям. В README приведены результаты проверки отказов на наборах вредоносных и безвредных запросов, однако оценка агентных навыков выявила отсутствие устойчивости к инъекциям в промпт и соблюдения заданных границ. Поддерживаются английский язык и входные изображения; для запуска требуется Transformers версии 5.15.0 или новее. Модель распространяется по лицензии Apache-2.0.

2936авг. 2026ctx131.1K
textimageapache-2.0hugging-face
MeerDevelopment
Qevi-2B

Qevi-2B — плотный vision-language чекпойнт от MeerDevelopment, полученный полным дообучением Qwen/Qwen3-VL-2B-Instruct. Модель принимает изображение и вопрос на английском с заранее заданным конечным набором вариантов и оценивает варианты по логитам, выдавая вероятности, например P(Yes) = 0,97. Для штатной работы требуется считывать логиты ограниченного набора ответов; обычный вызов generate() не воспроизводит заявленные результаты. Модель построена на архитектуре Qwen3-VL и распространяется в формате safetensors через Transformers. Она предназначена для закрытых вопросов об изображениях: ответов «да/нет» и выбора одного варианта из списка. README сообщает о повышении точности и калибровки вероятностей относительно базовой модели на внутренних и отложенных доменах. Контекстное окно и отдельный режим работы с видео для этой версии в карточке не описаны. Ограничения: вопросы и шаблоны должны быть на английском, варианты ответа задаются заранее и должны различаться первыми токенами; качество режима оценки упорядоченными словами не проверено. Для свободных описаний модель подходит хуже базовой, поскольку после дообучения генерирует более короткие ответы. Модель не валидирована как классификатор безопасности контента. Лицензия CC-BY-NC-4.0 ограничивает коммерческое использование.

2324сент. 2026ctx262.1K
textimagecc-by-nc-4.0hugging-face
ZechenBai
VideoLISA-3.8B

VideoLISA-3.8B — модель для сегментации объектов в видео по текстовым инструкциям, представленная Zechen Bai и соавторами из Show Lab Национального университета Сингапура и Amazon. Работа описана на NeurIPS 2024 под названием «One Token to Seg Them All: Language Instructed Reasoning Segmentation in Videos». Модель основана на LLaVA-Phi-3-mini-4k-instruct и дообучена для языково-инструктируемой сегментации. Она содержит 3,7 млрд параметров, использует архитектуру LLaVA-Phi и принимает контекст до 4096 токенов. Предназначена для понимания текстовых запросов о содержимом видео и сегментации соответствующих объектов; в каталоге также отмечена поддержка генерации текста и чата. Модель принимает изображения и текстовые инструкции и выдаёт текст и маски сегментации. В карточке указана лицензия Apache-2.0. README не содержит дополнительных сведений о качестве, поддерживаемых языках или практических ограничениях; метаданные указывают английский язык.

2046нояб. 2024ctx4.1K
textapache-2.0hugging-face
charactr
vocos-mel-24khz

charactr/vocos-mel-24khz — модель вокодера Vocos для синтеза звуковой волны из акустических признаков, в частности мел-спектрограмм. Она использует генеративно-состязательное обучение (GAN) и предсказывает спектральные коэффициенты, после чего восстанавливает аудио обратным преобразованием Фурье. В отличие от типичных GAN-вокодеров, модель не генерирует аудиосэмплы напрямую во временной области. Vocos выполняет синтез за один прямой проход, что делает его быстрым вариантом реконструкции речи или другого аудио по мел-спектрограмме. Репозиторий содержит веса PyTorch; для инференса README рекомендует библиотеку vocos. Модель выпущена под лицензией MIT. В карточке не указаны частота дискретизации, размер модели и языковая специализация.

2.9M50июнь 2023
textmithugging-face
clinical-assistance
whisper-large-v3-clinical-assistance

Whisper Chilean Spanish Large v3 — модель распознавания речи, дообученная на базе openai/whisper-large-v3 на наборе данных Mezosky/es_clinical_assistance_10k. Она предназначена для транскрибации речи на испанском языке в клинических сценариях. Модель содержит 905,2 млн параметров, использует архитектуру Whisper и опубликована в формате Safetensors. В карточке приведены результаты оценки на тестовом наборе: loss 0,0961 и WER 6,9352. Лицензия — Apache-2.0. Подробности о клинических сценариях, условиях оценки и ограничениях применения в карточке не раскрыты.

1181май 2024
textaudioapache-2.0hugging-face
tarteel-ai
whisper-tiny-ar-quran

tarteel-ai/whisper-tiny-ar-quran — модель распознавания речи на основе Whisper Tiny, дообученная Tarteel AI для расшифровки чтения Корана. В README указано значение WER 7,0535 на оценочном наборе; сведения о составе набора и протоколе оценки не приведены. Модель содержит 29,4 млн параметров, использует архитектуру WhisperForConditionalGeneration и распространяется в формате PyTorch. Она принимает аудио и генерирует текстовую транскрипцию. Репозиторий указывает лицензию Apache-2.0.

1.3K29дек. 2022ctx1K
textaudioapache-2.0hugging-face
loom-ai-org
dia-1.6b-loom

loom-ai-org/dia-1.6b-loom — это экспорт Dia-1.6B от Nari Labs в формате GGUF для запуска через loom.cpp и библиотеку loom-py-rt. Модель преобразует текст в девять потоков токенов нейронного аудиокодека; для получения звуковой волны их нужно декодировать отдельно кодеком dac-44khz-loom. Модель предназначена для синтеза диалоговой речи на английском языке. Метки говорящих [S1] и [S2] задаются непосредственно в тексте, также можно указывать невербальные реплики, например смех. Голос без аудиоподсказки выбирается моделью случайно; выборки высоковариативны, поэтому для подходящего результата может понадобиться несколько генераций. Экспорт сохраняет исходные веса без изменений и распространяется по лицензии Apache-2.0.

240сент. 2026
textaudioapache-2.0hugging-face
XythicK
microsoft_Fara-7B-GGUF

XythicK/microsoft_Fara-7B-GGUF — вариант модели Fara-7B, разработанной Microsoft Research. Это компактная мультимодальная decoder-only модель с 7 млрд параметров, предназначенная для управления компьютером и выполнения задач в браузере. Модель принимает текстовую цель пользователя, скриншоты текущего состояния и историю предыдущих рассуждений и действий, а затем генерирует текстовое рассуждение и вызов инструмента с параметрами действия, например координатами клика. Заявленная длина контекста составляет 128K токенов, основной язык — английский. Модель ориентирована на многошаговую автоматизацию веб-задач: поиск информации, покупки, бронирование поездок и ресторанов, заполнение рабочих сценариев и другие действия в интерфейсе. К сильным сторонам относятся небольшой для такого класса размер, мультимодальное восприятие экранов, планирование действий на высоком уровне и возможность локального запуска с потенциальными преимуществами по приватности и задержке. Обучение проводилось на синтетических траекториях действий, созданных и проверенных многоагентным конвейером; производственные базовые решения используют Qwen 2.5-VL. Ограничения включают поддержку только английского языка, отсутствие оценки для всех возможных прикладных сценариев и типичные риски языковых моделей, связанные с точностью, безопасностью и справедливостью. Модель обучена отказываться от опасных и регулируемых задач, а также останавливаться перед критическими действиями, включая ввод персональных данных, покупки, отправку писем, подачу заявлений и вход в аккаунты. В README указана лицензия MIT; конкретные характеристики GGUF-квантизации для данного варианта не приведены.

6040дек. 2025
textimagemithugging-face
facebook
mms-tts-acu

facebook/mms-tts-acu — модель синтеза речи на языке ачuar-шиwiar (Achuar-Shiwiar), разработанная Meta в рамках проекта Massively Multilingual Speech (MMS). Она преобразует входной текст в речевую аудиоволну и предназначена для озвучивания фраз на этом языке. Для языка обучена отдельная модель семейства VITS с архитектурой условного вариационного автоэнкодера: текстовый энкодер, потоковый модуль и декодер на основе свёрточных слоёв работают совместно для генерации речи. Модель содержит около 3,5 млн параметров и доступна в форматах PyTorch и Safetensors; использовать её можно через Transformers версии 4.33 и новее. Стохастический предсказатель длительности позволяет получать разные ритмические варианты одной фразы, поэтому при одинаковом тексте результат может различаться; фиксированный seed нужен для воспроизводимого аудио. Модель предназначена для одного языка, а качество и применимость за пределами ачuar-шиwiar не подтверждены карточкой. Лицензия CC BY-NC 4.0 разрешает использование с указанием авторства, но запрещает коммерческое применение.

1040сент. 2023
textaudiocc-by-nc-4.0hugging-face
rnjema-unima
mms-tts-luo-baseline

Это подготовленный к дообучению контрольный чекпойнт WAXAL MMS-TTS для синтеза речи на языке луо. Его описывает rnjema-unima; модель основана на VITS и использует facebook/mms-tts-ach как акустический донор, поскольку готового чекпойнта MMS-TTS для луо нет. В репозитории находятся конфигурационные файлы, а веса не хранятся: при запуске обучения скрипт загружает их из базовой модели. Чекпойнт предназначен для независимого дообучения на конфигурации luo_tts набора google/WaxalNLP и последующего преобразования текста на луо в речь. Архитектура VITS выполняет синтез сквозным способом, без отдельного вокодера; в метаданных указано 3,5 млн параметров. Донор ачоли служит начальной акустической и просодической основой, которую требуется адаптировать к луо. Лицензия модели — CC-BY-NC-4.0; данные WAXAL в README указаны под CC-BY-SA-4.0. Чекпойнт не предназначен для непосредственного вывода без загрузки донорских весов и дообучения на целевом языке.

1420апр. 2026
textaudiocc-by-nc-4.0hugging-face
maanka2
MOSS-Audio-Tokenizer-Nano

Карточка модели maanka2/MOSS-Audio-Tokenizer-Nano на Hugging Face совпадает с карточкой OpenMOSS-Team/MOSS-Audio-Tokenizer-Nano, поэтому описание составлено по ней. MOSS-Audio-Tokenizer-Nano — компактный аудиотокенизатор команды OpenMOSS-Team для MOSS-TTS-Nano и совместимых рабочих процессов семейства MOSS-TTS. Это модель на основе причинного Transformer по архитектуре Cat, которая кодирует стереозвук в дискретную последовательность токенов и восстанавливает его из неё. В чекпойнте около 22 млн параметров; модель принимает и выдаёт стереозвук с частотой 48 кГц, а частота потока кодов составляет 12,5 Гц. Остаточный квантователь использует 16 кодовых книг по 1024 элемента и поддерживает битрейт от 0,125 до 2 кбит/с. Модель предназначена для компактного представления и восстановления речи, музыки и других аудиосигналов, включая потоковые сценарии с низкой задержкой. Её можно применять как аудиотокенизатор в генерации речи и других рабочих процессах, которым нужна дискретная аудиорепрезентация. Для загрузки реализации может потребоваться Transformers с включённым trust_remote_code. Репозиторий распространяется по лицензии Apache-2.0. README приводит сравнительные оценки качества восстановления на английском LibriSpeech и китайском AISHELL-2, а также на наборах AudioSet и MUSDB. Интерфейс требует стереовход формы (2, T) или (B, 2, T); заявлена потоковая обработка чанками, но непрерывное пакетное декодирование имеет ограничения по состоянию и параллельности: одна активная потоковая сессия декодирования на экземпляр модели, без непрерывного пакетного кодирования и одновременной работы нескольких сессий на одном экземпляре.

140июнь 2026
textembeddingapache-2.0hugging-face

Задачи профессии

17 задач
240Автоматическое описание изображения для незрячего пользователя. — Механизм: AI собирает содержание и структуру из заданных ограничений, затем формирует несколько вариантов для выбора и доработки. Предметная логика: анализирует форму, текстуру, цвет и пространственные отношения, учитывая масштаб и качество изображения. Исходные данные: изображения, контент, интерфейсы, сенсорные сигналы и индивидуальные потребности. Формат результата: редактируемый артефакт по задаче «Автоматическое описание изображения для незрячего пользователя», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — ассистивный результат. Проверка: по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
241Описание окружающей сцены через камеру в реальном времени. — AI генерирует черновой результат, согласованный с контекстом, форматом и стилевыми требованиями задачи. К исходным данным относятся интерфейсы, сенсорные сигналы, индивидуальные потребности и настройки доступности. Формат результата: редактируемый артефакт по задаче «Описание окружающей сцены через камеру в реальном времени», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — ассистивный результат. Надёжность оценивают по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
242Чтение печатного текста и интерфейсов вслух. — Для этой задачи система находит нужные фрагменты в исходном материале, распознаёт их роль и переносит в заданные структурированные поля. Рабочие входы: сенсорные сигналы, индивидуальные потребности, настройки доступности и контент. Формат результата: структурированные данные, полученные в рамках «Чтение печатного текста и интерфейсов вслух», с нормализованными значениями и ссылками на исходные фрагменты. Критерии приёмки: посимвольной или пополевой сверкой с оригиналом и проверкой обязательных полей; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
243Распознавание препятствий и помощь в навигации. — Практическая реализация: AI анализирует поток наблюдений и локализует признаки, которые отличают целевой объект или нарушение от обычного состояния. Входной контекст включает индивидуальные потребности, настройки доступности, контент и интерфейсы. Формат результата: перечень объектов, событий или отклонений, относящихся к «Распознавание препятствий и помощь в навигации», с локализацией, уверенностью и признаками срабатывания. Ошибки выявляют по полноте обнаружения, доле ложных срабатываний и качеству локализации на независимой выборке; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
244Живые субтитры с разделением говорящих и описанием значимых неречевых звуков. — Механизм: AI генерирует черновой результат, согласованный с контекстом, форматом и стилевыми требованиями задачи. Предметная логика: согласует перевод или текст с длительностью сцены, паузами и артикуляцией. Исходные данные: речевая дорожка, настройки доступности, контент, интерфейсы и сенсорные сигналы. Формат результата: редактируемый артефакт по задаче «Живые субтитры с разделением говорящих и описанием значимых неречевых звуков», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — ассистивный результат. Проверка: по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
245Выделение речи на фоне шума для улучшения разборчивости. — AI находит нужные фрагменты в исходном материале, распознаёт их роль и переносит в заданные структурированные поля. Предметная логика: распознаёт речь, разделяет участников и связывает реплики с темами, решениями и действиями. К исходным данным относятся аудиопоток, контент, интерфейсы, сенсорные сигналы и индивидуальные потребности. Формат результата: структурированные данные, полученные в рамках «Выделение речи на фоне шума для улучшения разборчивости», с нормализованными значениями и ссылками на исходные фрагменты. Надёжность оценивают посимвольной или пополевой сверкой с оригиналом и проверкой обязательных полей; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
246Распознавание жестового языка. — Для этой задачи система анализирует поток наблюдений и локализует признаки, которые отличают целевой объект или нарушение от обычного состояния. Рабочие входы: интерфейсы, сенсорные сигналы, индивидуальные потребности и настройки доступности. Формат результата: перечень объектов, событий или отклонений, относящихся к «Распознавание жестового языка», с локализацией, уверенностью и признаками срабатывания. Критерии приёмки: по полноте обнаружения, доле ложных срабатываний и качеству локализации на независимой выборке; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
247Генерация жестового перевода с помощью аватара. — Практическая реализация: AI генерирует черновой результат, согласованный с контекстом, форматом и стилевыми требованиями задачи. Предметная логика: сохраняет значение, числа, имена и терминологию, одновременно адаптируя форму к нормам целевого языка. Входной контекст включает исходный материал, сенсорные сигналы, индивидуальные потребности, настройки доступности и контент. Формат результата: редактируемый артефакт по задаче «Генерация жестового перевода с помощью аватара», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — ассистивный результат. Ошибки выявляют по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
248Предсказание фраз в альтернативной и дополнительной коммуникации. — Механизм: AI строит прогностическую модель на исторических наблюдениях, добавляет текущие сигналы и оценивает несколько вариантов развития. Исходные данные: индивидуальные потребности, настройки доступности, контент и интерфейсы. Формат результата: прогноз для условия «Предсказание фраз в альтернативной и дополнительной коммуникации» с горизонтом, вероятностями сценариев, диапазоном неопределённости и главными влияющими факторами. Проверка: на отложенных периодах, по калибровке вероятностей, ошибке прогноза и устойчивости к изменению предпосылок; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
249Синтез персонального голоса для человека, утратившего речь. — AI сначала определяет элементы, которые должны сохраниться, затем перестраивает форму представления и отмечает внесённые изменения. Предметная логика: моделирует фонетику, просодию и тембр, сохраняя естественность и разборчивость. К исходным данным относятся текст, настройки доступности, контент, интерфейсы и сенсорные сигналы. Формат результата: преобразованный материал по задаче «Синтез персонального голоса для человека, утратившего речь» с сохранённым содержанием и журналом значимых изменений. Надёжность оценивают сравнением смысла и структуры до и после преобразования, а также поиском потерянных элементов; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
250Преобразование материала в формат easy-to-read с короткими фразами, символами и проверяемой структурой. — Для этой задачи система переводит объект в новый формат или вид, контролируя потери информации и нежелательные артефакты. Предметная логика: учитывает расположение элементов, связь между страницами и документные правила, а не только распознанный текст. Рабочие входы: оригиналы документов, контент, интерфейсы, сенсорные сигналы и индивидуальные потребности. Формат результата: преобразованный материал по задаче «Преобразование материала в формат easy-to-read с короткими фразами, символами и проверяемой структурой» с сохранённым содержанием и журналом значимых изменений. Критерии приёмки: сравнением смысла и структуры до и после преобразования, а также поиском потерянных элементов; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
251Голосовое, жестовое или взглядовое управление устройством. — Практическая реализация: AI оценивает текущее состояние, рассчитывает управляющее воздействие и корректирует его по обратной связи. Предметная логика: моделирует фонетику, просодию и тембр, сохраняя естественность и разборчивость. Входной контекст включает текст, интерфейсы, сенсорные сигналы, индивидуальные потребности и настройки доступности. Формат результата: управляющее решение для «Голосовое, жестовое или взглядовое управление устройством» с ожидаемым эффектом, допустимыми пределами и условиями безопасной остановки. Ошибки выявляют в симуляции и контролируемых испытаниях, с проверкой устойчивости и независимых аварийных ограничений; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
252Персональная адаптация размера, контраста и структуры интерфейса. — Механизм: AI учитывает историю поведения и текущий контекст, но ограничивает персонализацию правилами разнообразия и справедливости. Предметная логика: находит чувствительные фрагменты и заменяет их так, чтобы исключить обратное раскрытие через контекст. Исходные данные: текст и изображения, сенсорные сигналы, индивидуальные потребности, настройки доступности и контент. Формат результата: адаптированный вариант для «Персональная адаптация размера, контраста и структуры интерфейса» с указанием контекста и факторов, определивших персонализацию. Проверка: по пользовательской обратной связи, долгосрочной полезности и отсутствию нежелательной дискриминации; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
253Пошаговые подсказки для выполнения бытового действия. — AI объединяет историю, текущую ситуацию и обязательные условия, чтобы предложить следующий наиболее обоснованный шаг. К исходным данным относятся индивидуальные потребности, настройки доступности, контент и интерфейсы. Формат результата: несколько вариантов для «Пошаговые подсказки для выполнения бытового действия», ранжированных по полезности, ограничениям и причинам выбора. Надёжность оценивают по полезности для пользователя, соблюдению ограничений и качеству результата после принятия рекомендации; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
254Распознавание состояния пользователя и предложение безопасной помощи. — Для этой задачи система выделяет информативные признаки, сравнивает их с нормой и отмечает случаи, соответствующие искомому событию. Рабочие входы: настройки доступности, контент, интерфейсы и сенсорные сигналы. Формат результата: перечень объектов, событий или отклонений, относящихся к «Распознавание состояния пользователя и предложение безопасной помощи», с локализацией, уверенностью и признаками срабатывания. Критерии приёмки: по полноте обнаружения, доле ложных срабатываний и качеству локализации на независимой выборке; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
255Преобразование визуальной информации в тактильное или звуковое представление. — Практическая реализация: AI сначала определяет элементы, которые должны сохраниться, затем перестраивает форму представления и отмечает внесённые изменения. Предметная логика: работает одновременно со спектральной структурой, ритмом и временной динамикой сигнала. Входной контекст включает аудиодорожки, контент, интерфейсы, сенсорные сигналы и индивидуальные потребности. Формат результата: преобразованный материал по задаче «Преобразование визуальной информации в тактильное или звуковое представление» с сохранённым содержанием и журналом значимых изменений. Ошибки выявляют сравнением смысла и структуры до и после преобразования, а также поиском потерянных элементов; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
256Автоматическая проверка цифрового контента на доступность. — Механизм: AI выполняет набор автоматических проверок и сохраняет доказательства для каждого пройденного или нарушенного условия. Исходные данные: интерфейсы, сенсорные сигналы, индивидуальные потребности и настройки доступности. Формат результата: протокол выполнения «Автоматическая проверка цифрового контента на доступность» с пройденными условиями, найденными нарушениями и спорными местами для ручного решения. Проверка: повторным запуском на эталонных примерах, ручной проверкой спорных случаев и полнотой контрольного покрытия; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров. <a id="section-ii-1"></a>

0 моделей