/ Профессии
Универсальные способности и операции

I.15Доступность и ассистивные технологии

В разделе собраны самостоятельные задачи, где AI помогает делать цифровую и физическую среду доступнее для людей с различными ограничениями. Для каждого пункта отдельно указаны механизм, входы, результат и способ проверки.

ЗрениеАудиоЭмбеддингиТекст
AI-задач
17
в этой профессии
Подходящих моделей
8 953
по типу задач и модальности
Категория
I. Универсальные способности
Основные типы
ЗрениеАудиоЭмбеддинги

Рекомендованные модели

8 953 модели
Загрузки
Лайки
Дата выхода
2 851–2 880 из 8 953
csikasote
mms-1b-all-bemgen-combined-train-drodat-gdro-1.65e-4-dat-0.019-no-sd-0.00-62

Модель csikasote/mms-1b-all-bemgen-combined-train-drodat-gdro-1.65e-4-dat-0.019-no-sd-0.00-62 — дообученная версия facebook/mms-1b-all, созданная на наборе BEMGEN - BEM. Это модель распознавания речи на базе wav2vec2 с архитектурой Wav2Vec2ForCTC, предназначенная для преобразования аудио в текст. В карточке приведён результат оценки на тестовом наборе: CER 0,0532 и loss 12,3468. Размер модели — 1,3 млрд параметров. Языковая поддержка унаследована от многоязычной базовой MMS, рассчитанной более чем на тысячу языков, однако язык и область применения конкретного дообучения не уточнены. Для использования весов действует лицензия CC BY-NC 4.0, которая ограничивает коммерческое применение.

1380сент. 2026
textaudiocc-by-nc-4.0hugging-face
marcosremar2
moss-nano-ptbr-iasmin

moss-nano-ptbr-iasmin — дообученная модель MOSS-TTS-Nano на 100 млн параметров, созданная на основе OpenMOSS-Team/MOSS-TTS-Nano и настроенная на синтез речи голосом Iasmin на бразильском варианте португальского языка. Модель предназначена для преобразования текста в речь; режим continuation позволяет генерировать речь этим голосом без аудиообразца для голосового клонирования. При дообучении использовано 25 871 аудиоклип: 11 922 записи голоса Iasmin и 13 949 клипов с клонированным голосом Qwen3-TTS-1.7B; обучение проводилось в течение трёх эпох. Для отложенной выборки указана WER 0,049 по оценке Whisper-large-v3. Модель работает на CPU, использует архитектуру MOSS-TTS-Nano и распространяется под лицензией Apache-2.0.

200июнь 2026ctx32.8K
textapache-2.0hugging-face
BarathwajAnandan
nemotron-3.5-asr-offline-6bit-CoreML

Nemotron 3.5 ASR Offline 6-bit CoreML — это порт модели NVIDIA Nemotron 3.5 ASR Streaming 0.6B в формат CoreML, подготовленный для локального запуска на устройствах Apple Silicon. Репозиторий поддерживается BarathwajAnandan и предназначен для использования в движке FluidVoice; исходная модель разработана NVIDIA. Модель предназначена для автоматического распознавания речи и локальной транскрибации аудио. Это офлайн-вариант с промпт-условным мультиязычным режимом: язык можно задавать вручную, а при поддержке со стороны среды выполнения использовать автоматическое определение языка. Архитектура представлена набором CoreML-компонентов, включая предварительную обработку, encoder, decoder, joint-модель и tokenizer; encoder и joint-модель квантизованы до 6 бит. Размер пакета составляет около 531 МБ. Ключевые преимущества — локальная обработка на Apple Silicon, отсутствие необходимости загружать аудио на сервер и компактное квантизованное представление. README не содержит полного перечня поддерживаемых языков, характеристик качества, требований к длительности или формату аудио и других ограничений, поэтому эти параметры следует уточнять в карточке исходной модели NVIDIA. Лицензия указана как other; условия использования наследуются от upstream-модели NVIDIA Nemotron 3.5 ASR.

1.1K1июнь 2026
textaudiootherhugging-face
Prince-1
OmniVoice

OmniVoice — многоязычная модель синтеза речи, разработанная авторами проекта OmniVoice. Она основана на Qwen3-0.6B и использует архитектуру в стиле диффузионной языковой модели. Модель преобразует текст в речь, поддерживает более 600 языков, клонирование голоса по короткому аудиофрагменту и создание голоса с заданными характеристиками: например, полом, возрастом, высотой тона и акцентом. Модель предназначена для озвучивания текста, голосового дизайна и управляемой генерации речи. Она поддерживает невербальные вставки, такие как смех, и коррекцию произношения с помощью пиньиня или фонем. В карточке заявлена скорость генерации до 40 раз выше реального времени. Репозиторий содержит веса в форматах ONNX и safetensors; лицензия — Apache-2.0. Авторы указывают, что проект предназначен для академических исследований, и запрещают несанкционированное клонирование и имитацию голоса.

833май 2026ctx131.1K
textaudioapache-2.0hugging-face
jsbeaudry
oswald-large-v3-turbo-m1.1

jsbeaudry/oswald-large-v3-turbo-m1.1 — дообученная модель распознавания речи на архитектуре Whisper, разработанная jsbeaudry. Она предназначена для преобразования входящего аудио в текст. В карточке указаны 905,2 млн параметров, обучение с использованием Unsloth и библиотеки TRL, а также поддержка английского языка. Модель подходит для транскрибации английской речи. Репозиторий содержит веса в формате safetensors; лицензия — Apache-2.0. Сведения о контексте применения и точности распознавания в карточке не приведены.

1600нояб. 2025
textaudioapache-2.0hugging-face
OuteAI
OuteTTS-1.0-0.6B

OuteTTS 1.0 0.6B — компактная модель синтеза речи от OuteAI, построенная на плотной авторегрессионной архитектуре Qwen3ForCausalLM с 513,9 млн параметров. Она принимает текст и формирует аудио, поддерживает клонирование голоса по образцу и пакетную генерацию через библиотеку outetts. Модель обучена на английском, китайском, нидерландском, французском, грузинском, немецком, венгерском, итальянском, японском, корейском, латышском, польском, русском и испанском языках; заявленная длина контекста в метаданных — 40 960 токенов. Модель подходит для озвучивания текста, создания голосовых интерфейсов и генерации речи голосом из предоставленного образца. Для лучшего качества рекомендуется создать профиль диктора на целевом языке; при переносе голоса между языками могут сохраняться его акцент и особенности произношения. README указывает оптимальную длительность генерации около 42 секунд и предупреждает, что при собственной реализации важно применять штраф за повторы к окну из 64 последних токенов. Модель распространяется по лицензии Apache-2.0. Для клонирования голоса README требует явного предварительного согласия человека и запрещает обманное или незаконное использование.

38695май 2025ctx41K
textapache-2.0hugging-face
google
paligemma2-10b-mix-448

PaliGemma 2 10B Mix 448 — разработанная Google открытая мультимодальная модель, объединяющая визуальный энкодер SigLIP и языковую модель Gemma 2. Она принимает изображения и текст и генерирует текст; версия 448 рассчитана на обработку изображений с разрешением 448 пикселей. Модель предназначена прежде всего для дообучения под задачи компьютерного зрения и языка, включая описание изображений и коротких видео, ответы на вопросы об изображениях, чтение текста, обнаружение и сегментацию объектов. Модель поддерживает многоязычные запросы. Шаблоны подсказок позволяют задавать режимы описания, OCR, визуальных вопросов и ответов, а также локализации и сегментации объектов. Это базовая модель для настройки под конкретные задачи, а не полноценный многоходовый чат-бот; её ответы могут содержать ошибки, а открытые или сложные инструкции могут давать слабый результат. Возможны предвзятость и небезопасные или вводящие в заблуждение ответы, поэтому для прикладного использования нужны оценка и подходящие меры контроля. Лицензия — Gemma; применяются ограничения политики допустимого использования Gemma.

44438нояб. 2024
textimagegemmahugging-face
leo009
paligemma-3b-mix-224

leo009/paligemma-3b-mix-224 — версия мультимодальной модели PaliGemma с открытыми весами, разработанной Google и размещённой пользователем leo009. Модель построена на архитектуре PaliGemma, объединяющей зрительный энкодер SigLIP и языковую модель Gemma; принимает изображение размером 224 × 224 пикселя и текстовые последовательности до 256 токенов, а генерирует текст. В карточке указана настройка на смесь задач переноса, а метаданные обозначают формат safetensors и библиотеку Transformers. Модель предназначена для одношаговых сценариев «изображение и запрос — текстовый ответ»: описания изображений и коротких видео, визуальных вопросов и ответов, чтения текста на изображении, обнаружения и сегментации объектов. Лучше подходит как основа для дообучения под конкретную задачу, чем как готовый универсальный помощник; диалог из нескольких ходов не поддерживает. Заявлена поддержка нескольких языков, но конкретный список в предоставленных данных отсутствует. Лицензия — Gemma.

781май 2024
textimagegemmahugging-face
parler-tts
parler-tts-large-v1

Parler-TTS Large v1 — модель преобразования текста в речь, выпущенная проектом Parler-TTS при участии исследователей Stability AI и Эдинбургского университета. Модель с архитектурой ParlerTTSForConditionalGeneration содержит 2,2 млрд параметров и обучена на 45 тысячах часов аудио. Она генерирует естественно звучащую речь на английском языке, принимая текст и текстовое описание желаемого звучания.

5.9K275авг. 2024ctx512
textaudioapache-2.0hugging-face
nectec
Pathumma-whisper-th-large-v3

nectec/Pathumma-whisper-th-large-v3 — модель распознавания речи команды Pathumma Audio Team. Она основана на Whisper large-v3 от OpenAI и дообучена для распознавания тайского языка; карточка также указывает английский среди языков модели. Модель содержит около 905,2 млн параметров и доступна в формате safetensors для библиотеки Transformers. Модель предназначена для преобразования аудиозаписей в текст. Её можно использовать для транскрибации тайской и английской речи. README содержит пример запуска через класс pipeline в Transformers, но не приводит подробностей о данных дообучения или результатах оценки качества. Лицензия — Apache-2.0.

8.1K16окт. 2024
textaudioapache-2.0hugging-face
ysdede
Phi-4-mm-inst-asr-turkish-unf

Это дообученная модель Microsoft Phi-4 Multimodal Instruct для распознавания турецкой речи и преобразования аудио в текст. В обучении разморозили слои энкодера и провели одну эпоху на парах турецкого аудио и текста; использованы датасеты Common Voice, лекции Khan Academy на турецком и записи с шумом. Модель содержит 3,8 млрд параметров, построена на архитектуре Phi4MM, работает через Transformers и имеет контекст 4096 токенов. Модель предназначена для транскрибирования турецкой речи, в том числе коротких записей и образовательных лекций. В README приведён результат WER 9,7% на тесте Common Voice, однако автор отмечает возможную утечку говорящих между обучающей и тестовой выборками, короткую длительность высказываний и влияние нормализации текста. На шумных или отличающихся по стилю записях качество может быть хуже; модель всё ещё развивается. Лицензия — MIT.

734март 2025ctx131.1K
textmithugging-face
mradermacher
Qwen2-VL-2B-Abliterated-Caption-it-i1-GGUF

Qwen2-VL-2B-Abliterated-Caption-it-i1-GGUF — это квантованная vision-language модель для понимания изображений и генерации текстовых описаний. Базовая модель prithivMLmods/Qwen2-VL-2B-Abliterated-Caption-it разработана prithivMLmods, а GGUF-квантизация выполнена mradermacher. Модель ориентирована на image captioning, visual understanding и задачи image-to-text, включая автоматическое составление описаний изображений. Модель имеет размер 2B параметров, поддерживает работу с изображениями и текстом и заявлена для английского языка. Она обучалась с использованием наборов данных Caption3o-XL-v4, Caption3o-Opt-v3-Tiny, Caption3o-LongCap-v4 и Caption3o-Opt-v3. Доступны варианты GGUF-квантизации с размером примерно от 0,5 до 1,1 ГБ, что позволяет запускать модель на устройствах с ограниченными ресурсами; варианты различаются балансом скорости, качества и объёма памяти. Для работы с визуальными входными данными могут потребоваться отдельные mmproj-файлы из статического репозитория. Сильными сторонами модели являются компактный размер, поддержка визуального анализа и широкий выбор квантованных вариантов, включая рекомендуемые i1-Q4_K_M и i1-Q4_K_S. Ограничения включают ориентацию на английский язык, возможное снижение качества у наиболее агрессивных квантов и отсутствие в предоставленной карточке сведений о размере контекста, точных характеристиках архитектуры и результатах бенчмарков. Модель распространяется по лицензии Apache-2.0.

6320сент. 2025
textimageapache-2.0hugging-face
zeromodels
qwen3.5-9b

zeromodels/qwen3.5-9b — конвертированная для Keras 3 мультимодальная модель на основе Qwen3.5-9B от команды Qwen. Она принимает изображения и текст и генерирует текст; текстовый вариант загрузки использует языковую часть без визуального энкодера. Архитектура включает визуальный модуль Qwen3-VL и плотный текстовый декодер с гибридом Gated-DeltaNet и gated full attention. Веса хранятся в формате bfloat16; одна реализация работает с TensorFlow, PyTorch и JAX. Модель предназначена для диалогов и анализа изображений с текстовыми запросами, а также для текстовых сценариев с использованием языковой части. В метаданных указаны 9 млрд параметров у базовой модели Qwen3.5-9B. Репозиторий лицензирован по Apache 2.0; подробности об исходной модели и условиях её использования следует сверять с карточкой Qwen/Qwen3.5-9B.

1630июль 2026
textimageapache-2.0hugging-face
Renesas
Qwen3-ASR-1.7B-GGUF

Renesas публикует сборку Qwen3-ASR-1.7B для распознавания речи на платформе Renesas X5H. Модель поддерживает определение языка и транскрибацию речи на 30 языках, а также 22 китайских диалектах. В архитектуре указаны аудиоэнкодер с 24 слоями и скрытым размером 1024 и текстовый декодер с 28 слоями и скрытым размером 2048; исходная модель — Qwen/Qwen3-ASR-1.7B. Репозиторий предназначен для инференса на плате Renesas X5H с SDK версии 4.34.0. README приводит замеры для 15-секундного англоязычного аудио: для W4A16 и FP16 на одном кластере NPX указана скорость предварительной обработки и декодирования. Для запуска требуются соответствующие файлы модели и проектора, а также установщик для X5H. Модель принимает аудио и выдаёт распознанный текст; базовая модель поддерживает потоковую обработку, согласно краткому описанию в метаданных. Репозиторий распространяется по лицензии Apache-2.0. Приведённые показатели производительности относятся к указанной платформе и конфигурациям, поэтому не характеризуют скорость на другом оборудовании.

1000июль 2026
textaudioapache-2.0hugging-face
Qwen
Qwen3-TTS-12Hz-0.6B-Base

Qwen3-TTS-12Hz-0.6B-Base — базовая модель синтеза речи из семейства Qwen3-TTS, разработанного командой Qwen. Это плотная модель с архитектурой Qwen3TTSForConditionalGeneration и дискретной многокодовой языковой архитектурой; она использует разработанный для семейства токенизатор речи Qwen3-TTS-Tokenizer-12Hz. Веса опубликованы в формате safetensors, лицензия — Apache-2.0. Модель предназначена для генерации речи по тексту и быстрого клонирования голоса по предоставленному аудио. Семейство поддерживает китайский, английский, японский, корейский, немецкий, французский, русский, португальский, испанский и итальянский языки. В карточке также заявлены потоковая генерация с низкой задержкой и управление характеристиками голоса естественными языковыми инструкциями. Для клонирования требуется аудиопример голоса; качество результата зависит от входного текста и аудио. Карточка описывает возможности семейства в целом, поэтому отдельные показатели и свойства именно версии 0.6B Base подтверждены не полностью.

584K337янв. 2026ctx131.1K
textaudioapache-2.0hugging-face
swipeautomations
Qwen3-TTS-12Hz-0.6B-Base

Карточка модели swipeautomations/Qwen3-TTS-12Hz-0.6B-Base на Hugging Face совпадает с карточкой Qwen/Qwen3-TTS-12Hz-0.6B-Base, поэтому описание составлено по ней. Qwen3-TTS-12Hz-0.6B-Base — базовая модель синтеза речи из семейства Qwen3-TTS, разработанного командой Qwen. Это плотная модель с архитектурой Qwen3TTSForConditionalGeneration и дискретной многокодовой языковой архитектурой; она использует разработанный для семейства токенизатор речи Qwen3-TTS-Tokenizer-12Hz. Веса опубликованы в формате safetensors, лицензия — Apache-2.0. Модель предназначена для генерации речи по тексту и быстрого клонирования голоса по предоставленному аудио. Семейство поддерживает китайский, английский, японский, корейский, немецкий, французский, русский, португальский, испанский и итальянский языки. В карточке также заявлены потоковая генерация с низкой задержкой и управление характеристиками голоса естественными языковыми инструкциями. Для клонирования требуется аудиопример голоса; качество результата зависит от входного текста и аудио. Карточка описывает возможности семейства в целом, поэтому отдельные показатели и свойства именно версии 0.6B Base подтверждены не полностью.

50июнь 2026ctx131.1K
textaudioapache-2.0hugging-face
Serveurperso
Qwen3-TTS-GGUF

Qwen3-TTS-GGUF — набор весов в формате GGUF для qwentts.cpp, C++17/GGML-порта модели Qwen3-TTS 12 Hz, разработанной командой Qwen и Alibaba. Модель предназначена для синтеза речи из текста, включая многоязычный zero-shot TTS с именованными дикторами и диалектами мандаринского китайского, клонирование голоса по референсному аудиофрагменту и, в версии VoiceDesign 1.7B, создание голоса по текстовому описанию его характеристик. Поддерживаются китайский, английский, французский, немецкий, испанский, итальянский, португальский, японский, корейский, русский и арабский языки. Комплект использует две совместно загружаемые GGUF-модели: talker на базе Qwen3 с code predictor MTP head и опциональным speaker encoder, который преобразует текст в коды с частотой 12 Hz, и общий аудиотокенизатор на базе SEANet, ConvNeXt, DAC v2 и RVQ, преобразующий коды в монофонический звук с частотой 24 кГц и обратно. Доступны размеры talker 0.6B и 1.7B; режимы Base и CustomVoice доступны для обоих размеров, а VoiceDesign — только для 1.7B. Варианты F32, BF16, Q8_0 и Q4_K_M позволяют выбирать между точностью, размером и требованиями к VRAM. Сильные стороны модели — многоязычность, поддержка нескольких сценариев генерации и клонирования голоса, работа на CPU и через CUDA, Metal или Vulkan, а также заявленное первое место по времени до первого аудио в потоковом тесте Open TTS Leaderboard по состоянию на 9 сентября 2026 года. Ограничения включают необходимость совместной загрузки talker и токенизатора, значительный объём файлов для версии 1.7B и зависимость качества и ресурсоёмкости от выбранной квантизации; конкретный максимальный контекст в README не указан. Модель и аудиокодек распространяются по Apache 2.0, инструменты GGUF-порта qwentts.cpp — по MIT.

413K59май 2026
textaudioapache-2.0hugging-face
prithivMLmods
Qwen3-VL-4B-Instruct-Unredacted-MAX

Qwen3-VL-4B-Instruct-Unredacted-MAX — дообученная мультимодальная модель prithivMLmods на архитектуре Qwen3-VL с 4 млрд параметров. Она принимает текстовые запросы и изображения и формирует текстовые ответы; предназначена для диалога с визуальным контекстом, понимания изображений, генерации описаний и мультимодальных экспериментов. Поддерживает изображения разных разрешений и пропорций и рассчитана на эффективный запуск по сравнению с более крупными моделями. Модель подходит для создания подписей к изображениям и подготовки аннотаций для наборов данных, оценки систем компьютерного зрения с языковым интерфейсом и прототипирования приложений, объединяющих текст и изображения. Выпуск обновляет упаковку и совместимость с Transformers относительно huihui-ai/Qwen3-VL-4B-Instruct-abliterated, сохраняя возможности исходной архитектуры. Репозиторий распространяется по лицензии Apache-2.0. Качество зависит от чёткости изображения и формулировки запроса; интерпретации сложных сцен могут быть неполными или непоследовательными. Для стабильного вывода требуется достаточно видеопамяти, а результаты зависят от настроек декодирования и среды запуска.

1.1K20февр. 2026ctx262.1K
textimageapache-2.0hugging-face
gigant
romanian-wav2vec2

gigant разработал румынскую модель распознавания речи на основе facebook/wav2vec2-xls-r-300m, дообучив её на румынской части Common Voice 8.0 и дополнив данными из набора синтезированной румынской речи. Это модель семейства wav2vec2 с архитектурой Wav2Vec2ForCTC; число параметров — около 402,7 млн. Для декодирования с языковой моделью предусмотрена 5-граммовая модель, обученная на корпусе парламентских текстов Румынии. Модель предназначена для транскрибации румынской речи из аудиоклипов с частотой дискретизации 16 кГц. В README указано первое место на Romanian Speech Recognition в Robust Speech Challenge; на тестовой части Common Voice 8.0 приведены WER 0,1174 и CER 0,0294 без оптимизации 5-граммовой языковой моделью. Вывод приводится в нижнем регистре и без пунктуации. Для декодирования с языковой моделью нужны pyctcdecode и kenlm. Лицензия — Apache-2.0.

1.3M18март 2022
textaudioapache-2.0hugging-face
Merlin07
s2-pro

Карточка модели Merlin07/s2-pro на Hugging Face совпадает с карточкой fishaudio/s2-pro, поэтому описание составлено по ней. Fish Audio S2 Pro — модель синтеза речи, разработанная Fish Audio. Она преобразует текст в речь и поддерживает управление интонацией, эмоциями и другими особенностями произношения с помощью текстовых инструкций в квадратных скобках, которые можно размещать рядом с нужными фрагментами текста. Архитектура объединяет декодерный трансформер с аудиокодеком RVQ и состоит из двух авторегрессионных частей: модель на 4 млрд параметров предсказывает основной семантический код, а компонент на 400 млн параметров генерирует девять остаточных кодов для акустических деталей. Модель предназначена для многоязычной генерации речи, включая потоковый синтез. В карточке заявлена поддержка более 80 языков; среди основных — японский, английский и китайский, а также русский, корейский, испанский, португальский, арабский, французский и немецкий. Модель принимает текст и выдаёт аудио. Авторы сообщают о потоковом движке инференса на базе SGLang и скорости генерации выше реального времени на NVIDIA H200; эти показатели зависят от оборудования и конфигурации. Лицензия указана как «other», поэтому условия использования следует проверить на странице репозитория Hugging Face.

90июль 2026ctx131.1K
textaudiootherhugging-face
BytedanceDouyinContent
SAIL-VL-2B

SAIL-VL-2B — компактная модель для работы с изображениями и текстом, разработанная командой Bytedance Douyin Content. В архитектуре используются визуальный энкодер InternViT-300M, языковая модель Qwen2.5-1.5B и двухслойный MLP-адаптер; заявлено объединение визуальных токенов 2×2 и обработка изображений с разрешением 448×448 и динамическим числом фрагментов. Модель предназначена для диалоговых задач по изображениям: ответов на вопросы, общего визуального анализа, распознавания текста на изображениях и описания сцен. В README приведены результаты оценок на мультимодальных бенчмарках и примеры подробных ответов, а метаданные указывают на возможности чата и интерфейс вызова инструментов. Карточка называет модель базовой VLM для приложений, в том числе с прицелом на мобильное развертывание. Модель дообучена на базе Qwen/Qwen2.5-1.5B-Instruct и распространяется в формате safetensors по лицензии Apache-2.0. README заявляет поддержку нескольких мультимодальных сценариев, однако конкретные языки не перечисляет; метаданные карточки указывают английский и китайский. Результаты в README оценивала команда разработчиков с использованием варианта VLMEvalKit, поэтому они не являются независимой оценкой.

15934дек. 2024ctx131.1K
textapache-2.0hugging-face
sil-ai
senga-LUK-aligned-degate60-4k-preview-speecht5

senga-LUK-aligned-degate60-4k-preview-speecht5 — дообученная модель SpeechT5 на базе microsoft/speecht5_tts, опубликованная sil-ai. Она предназначена для синтеза речи по тексту. В метаданных указан класс SpeechT5ForTextToSpeech и формат весов safetensors; README сообщает значение Loss 0,0798 на тестовой выборке, но не раскрывает состав данных и условия оценки. Модель распространяется по лицензии MIT. README не содержит подробного описания предполагаемых сценариев, языков, характеристик синтезируемой речи или ограничений качества; поэтому область применения можно определить только как преобразование текста в аудио.

60июль 2026ctx600
textaudiomithugging-face
sil-ai
senga-LUK-aligned-degate90-4k-preview-speecht5

senga-LUK-aligned-degate90-4k-preview-speecht5 — дообученная модель Microsoft SpeechT5 для синтеза речи из текста. Она предназначена для преобразования текстового ввода в аудио; в карточке приведён результат оценки Loss 0.0891, но набор данных и подробности оценки не раскрыты. Модель использует архитектуру SpeechT5ForTextToSpeech и распространяется в формате safetensors через Transformers. Модель основана на microsoft/speecht5_tts, который обучен на LibriTTS. Для этой версии заявлена лицензия MIT. Языки, голосовые характеристики, длина входного текста и качество синтеза в карточке не описаны.

110июль 2026ctx600
textaudiomithugging-face
sil-ai
senga-nt-base-tts

senga-nt-base-tts — дообученная модель синтеза речи из текста на архитектуре SpeechT5, основанная на microsoft/speecht5_tts. Модель разработана sil-ai и предназначена для преобразования текстового ввода в аудио. В README приведён результат оценки: loss 0.0922. Данные об обучающем корпусе, поддерживаемых языках, голосах и сценариях применения не раскрыты. Модель распространяется в формате safetensors через библиотеку Transformers по лицензии MIT.

70июль 2026ctx600
textaudiomithugging-face
Lin-Chen
ShareCaptioner

ShareCaptioner — модель для создания подробных описаний изображений, разработанная Lin-Chen и дообученная на базе InternLM-Xcomposer-7B. Она обучалась в ноябре 2023 года на 100 тысячах пар «изображение — текст», где подписи были созданы с помощью GPT-4 Vision. Модель рассчитана на ввод изображений с разрешением 448×448 и генерирует текстовые подписи; её архитектура — плотная InternLMXComposerForCausalLM, размер — 6,9 млрд параметров, контекст — 2048 токенов. Модель предназначена для исследователей и любителей компьютерного зрения, NLP и машинного обучения, которым нужны детальные подписи к изображениям. В метаданных Hugging Face основной тег задачи — feature-extraction, однако карточка описывает именно генерацию подписей, поэтому основная задача каталога — image-to-text. Репозиторий содержит веса PyTorch. Лицензия в доступных данных не указана.

4457дек. 2023ctx2K
texthugging-face
mlx-community
SmolVLM-256M-Instruct-4bit

mlx-community/SmolVLM-256M-Instruct-4bit — четырёхбитная конверсия мультимодальной модели HuggingFaceTB/SmolVLM-256M-Instruct в формат MLX, опубликованная mlx-community. Модель семейства Idefics3 принимает текстовые запросы и изображения и формирует текстовые ответы; предназначена для диалоговых сценариев с визуальным содержимым, включая описание изображений и ответы на вопросы по ним. В метаданных указана архитектура Idefics3ForConditionalGeneration и поддержка чата и зрения. Модель создана на основе SmolLM2-135M-Instruct и SigLIP Base Patch16-512; в README сказано, что конверсия выполнена с помощью mlx-vlm 0.1.11. Репозиторий заявляет лицензию Apache-2.0. Карточка отсылает за подробностями к исходной модели, поэтому конкретные ограничения и характеристики контекста здесь не приведены.

1.2K0янв. 2025ctx8.2K
textimageapache-2.0hugging-face
mlx-community
SmolVLM-500M-Instruct-4bit

SmolVLM-500M-Instruct-4bit — компактная мультимодальная модель для диалога по изображениям, представленная сообществом mlx-community. Она объединяет языковую модель SmolLM2-360M-Instruct с визуальной частью SigLIP и использует архитектуру Idefics3; модель можно запускать локально на устройствах Apple через MLX. Репозиторий содержит преобразованную в формат MLX 4-битную версию исходной модели HuggingFaceTB/SmolVLM-500M-Instruct. Модель принимает изображения и текстовые запросы, а в ответ генерирует текст. Она предназначена для описания изображений, визуальных вопросов и ответов, а также диалога с визуальным контекстом. В карточке заявлен английский язык. Лицензия — Apache-2.0.

2640янв. 2025ctx8.2K
textimageapache-2.0hugging-face
sjooaaoo2
speecht5_finetuned_voxpopuli_nl

sjooaaoo2/speecht5_finetuned_voxpopuli_nl — дообученная модель SpeechT5 для синтеза речи из текста. Она основана на microsoft/speecht5_tts и использует архитектуру SpeechT5ForTextToSpeech; веса опубликованы в формате safetensors. Название репозитория указывает на дообучение для нидерландского языка на VoxPopuli, однако README не подтверждает состав обучающих данных и подробности настройки. Модель предназначена для преобразования текстового ввода в аудио. В README приведено значение loss 0,5012 на оценочной выборке, но не описаны протокол оценки, качество речи, голосовые характеристики или ограничения. Лицензия — MIT.

160сент. 2026ctx600
textaudiomithugging-face
ctaguchi
ssc-bxk-model

ctaguchi/ssc-bxk-model — модель автоматического распознавания речи, разработанная дообучением facebook/wav2vec2-xls-r-300m. Она использует архитектуру Wav2Vec2ForCTC и содержит 402,7 млн параметров. Модель принимает аудио и выдаёт распознанный текст; в карточке не уточняются поддерживаемые языки и формат входного аудио. На оценочном наборе указаны значения Loss 1,4388, CER 0,2469 и WER 0,8253. Датасет, сценарии применения и дополнительные ограничения в карточке не описаны. Модель распространяется под лицензией Apache-2.0.

1040нояб. 2025
textaudioapache-2.0hugging-face
Aliados
supertonic-3

Карточка модели Aliados/supertonic-3 на Hugging Face совпадает с карточкой Supertone/supertonic-3, поэтому описание составлено по ней. Supertonic 3 — компактная многоязычная модель синтеза речи от Supertone для локального запуска. Модель распространяется в формате ONNX и работает через ONNX Runtime на устройстве, без обращения к облаку. В открытых ONNX-ресурсах около 99 млн параметров. Модель преобразует текст в речь на 31 языке и рассчитана на сценарии, где важны быстрая генерация и локальное выполнение: озвучивание аудиокниг, новостей, диалогов и телефонных обращений, в том числе на мобильных и периферийных устройствах. Поддерживаются фиксированные предустановленные голосовые стили; README также описывает демонстрацию пользовательских стилей по референсному аудио и теги выразительности. По сравнению с Supertonic 2 заявлены более стабильное чтение с меньшим числом повторов и пропусков, а также улучшенное сходство голосов на общих языках. Лицензия — OpenRAIL. README не приводит независимой оценки качества для всех языков; пользовательские стили по референсному аудио связаны с отдельным Voice Builder.

60июль 2026
textaudioopenrailhugging-face

Задачи профессии

17 задач
240Автоматическое описание изображения для незрячего пользователя. — Механизм: AI собирает содержание и структуру из заданных ограничений, затем формирует несколько вариантов для выбора и доработки. Предметная логика: анализирует форму, текстуру, цвет и пространственные отношения, учитывая масштаб и качество изображения. Исходные данные: изображения, контент, интерфейсы, сенсорные сигналы и индивидуальные потребности. Формат результата: редактируемый артефакт по задаче «Автоматическое описание изображения для незрячего пользователя», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — ассистивный результат. Проверка: по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
241Описание окружающей сцены через камеру в реальном времени. — AI генерирует черновой результат, согласованный с контекстом, форматом и стилевыми требованиями задачи. К исходным данным относятся интерфейсы, сенсорные сигналы, индивидуальные потребности и настройки доступности. Формат результата: редактируемый артефакт по задаче «Описание окружающей сцены через камеру в реальном времени», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — ассистивный результат. Надёжность оценивают по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
242Чтение печатного текста и интерфейсов вслух. — Для этой задачи система находит нужные фрагменты в исходном материале, распознаёт их роль и переносит в заданные структурированные поля. Рабочие входы: сенсорные сигналы, индивидуальные потребности, настройки доступности и контент. Формат результата: структурированные данные, полученные в рамках «Чтение печатного текста и интерфейсов вслух», с нормализованными значениями и ссылками на исходные фрагменты. Критерии приёмки: посимвольной или пополевой сверкой с оригиналом и проверкой обязательных полей; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
243Распознавание препятствий и помощь в навигации. — Практическая реализация: AI анализирует поток наблюдений и локализует признаки, которые отличают целевой объект или нарушение от обычного состояния. Входной контекст включает индивидуальные потребности, настройки доступности, контент и интерфейсы. Формат результата: перечень объектов, событий или отклонений, относящихся к «Распознавание препятствий и помощь в навигации», с локализацией, уверенностью и признаками срабатывания. Ошибки выявляют по полноте обнаружения, доле ложных срабатываний и качеству локализации на независимой выборке; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
244Живые субтитры с разделением говорящих и описанием значимых неречевых звуков. — Механизм: AI генерирует черновой результат, согласованный с контекстом, форматом и стилевыми требованиями задачи. Предметная логика: согласует перевод или текст с длительностью сцены, паузами и артикуляцией. Исходные данные: речевая дорожка, настройки доступности, контент, интерфейсы и сенсорные сигналы. Формат результата: редактируемый артефакт по задаче «Живые субтитры с разделением говорящих и описанием значимых неречевых звуков», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — ассистивный результат. Проверка: по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
245Выделение речи на фоне шума для улучшения разборчивости. — AI находит нужные фрагменты в исходном материале, распознаёт их роль и переносит в заданные структурированные поля. Предметная логика: распознаёт речь, разделяет участников и связывает реплики с темами, решениями и действиями. К исходным данным относятся аудиопоток, контент, интерфейсы, сенсорные сигналы и индивидуальные потребности. Формат результата: структурированные данные, полученные в рамках «Выделение речи на фоне шума для улучшения разборчивости», с нормализованными значениями и ссылками на исходные фрагменты. Надёжность оценивают посимвольной или пополевой сверкой с оригиналом и проверкой обязательных полей; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
246Распознавание жестового языка. — Для этой задачи система анализирует поток наблюдений и локализует признаки, которые отличают целевой объект или нарушение от обычного состояния. Рабочие входы: интерфейсы, сенсорные сигналы, индивидуальные потребности и настройки доступности. Формат результата: перечень объектов, событий или отклонений, относящихся к «Распознавание жестового языка», с локализацией, уверенностью и признаками срабатывания. Критерии приёмки: по полноте обнаружения, доле ложных срабатываний и качеству локализации на независимой выборке; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
247Генерация жестового перевода с помощью аватара. — Практическая реализация: AI генерирует черновой результат, согласованный с контекстом, форматом и стилевыми требованиями задачи. Предметная логика: сохраняет значение, числа, имена и терминологию, одновременно адаптируя форму к нормам целевого языка. Входной контекст включает исходный материал, сенсорные сигналы, индивидуальные потребности, настройки доступности и контент. Формат результата: редактируемый артефакт по задаче «Генерация жестового перевода с помощью аватара», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — ассистивный результат. Ошибки выявляют по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
248Предсказание фраз в альтернативной и дополнительной коммуникации. — Механизм: AI строит прогностическую модель на исторических наблюдениях, добавляет текущие сигналы и оценивает несколько вариантов развития. Исходные данные: индивидуальные потребности, настройки доступности, контент и интерфейсы. Формат результата: прогноз для условия «Предсказание фраз в альтернативной и дополнительной коммуникации» с горизонтом, вероятностями сценариев, диапазоном неопределённости и главными влияющими факторами. Проверка: на отложенных периодах, по калибровке вероятностей, ошибке прогноза и устойчивости к изменению предпосылок; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
249Синтез персонального голоса для человека, утратившего речь. — AI сначала определяет элементы, которые должны сохраниться, затем перестраивает форму представления и отмечает внесённые изменения. Предметная логика: моделирует фонетику, просодию и тембр, сохраняя естественность и разборчивость. К исходным данным относятся текст, настройки доступности, контент, интерфейсы и сенсорные сигналы. Формат результата: преобразованный материал по задаче «Синтез персонального голоса для человека, утратившего речь» с сохранённым содержанием и журналом значимых изменений. Надёжность оценивают сравнением смысла и структуры до и после преобразования, а также поиском потерянных элементов; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
250Преобразование материала в формат easy-to-read с короткими фразами, символами и проверяемой структурой. — Для этой задачи система переводит объект в новый формат или вид, контролируя потери информации и нежелательные артефакты. Предметная логика: учитывает расположение элементов, связь между страницами и документные правила, а не только распознанный текст. Рабочие входы: оригиналы документов, контент, интерфейсы, сенсорные сигналы и индивидуальные потребности. Формат результата: преобразованный материал по задаче «Преобразование материала в формат easy-to-read с короткими фразами, символами и проверяемой структурой» с сохранённым содержанием и журналом значимых изменений. Критерии приёмки: сравнением смысла и структуры до и после преобразования, а также поиском потерянных элементов; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
251Голосовое, жестовое или взглядовое управление устройством. — Практическая реализация: AI оценивает текущее состояние, рассчитывает управляющее воздействие и корректирует его по обратной связи. Предметная логика: моделирует фонетику, просодию и тембр, сохраняя естественность и разборчивость. Входной контекст включает текст, интерфейсы, сенсорные сигналы, индивидуальные потребности и настройки доступности. Формат результата: управляющее решение для «Голосовое, жестовое или взглядовое управление устройством» с ожидаемым эффектом, допустимыми пределами и условиями безопасной остановки. Ошибки выявляют в симуляции и контролируемых испытаниях, с проверкой устойчивости и независимых аварийных ограничений; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
252Персональная адаптация размера, контраста и структуры интерфейса. — Механизм: AI учитывает историю поведения и текущий контекст, но ограничивает персонализацию правилами разнообразия и справедливости. Предметная логика: находит чувствительные фрагменты и заменяет их так, чтобы исключить обратное раскрытие через контекст. Исходные данные: текст и изображения, сенсорные сигналы, индивидуальные потребности, настройки доступности и контент. Формат результата: адаптированный вариант для «Персональная адаптация размера, контраста и структуры интерфейса» с указанием контекста и факторов, определивших персонализацию. Проверка: по пользовательской обратной связи, долгосрочной полезности и отсутствию нежелательной дискриминации; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
253Пошаговые подсказки для выполнения бытового действия. — AI объединяет историю, текущую ситуацию и обязательные условия, чтобы предложить следующий наиболее обоснованный шаг. К исходным данным относятся индивидуальные потребности, настройки доступности, контент и интерфейсы. Формат результата: несколько вариантов для «Пошаговые подсказки для выполнения бытового действия», ранжированных по полезности, ограничениям и причинам выбора. Надёжность оценивают по полезности для пользователя, соблюдению ограничений и качеству результата после принятия рекомендации; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
254Распознавание состояния пользователя и предложение безопасной помощи. — Для этой задачи система выделяет информативные признаки, сравнивает их с нормой и отмечает случаи, соответствующие искомому событию. Рабочие входы: настройки доступности, контент, интерфейсы и сенсорные сигналы. Формат результата: перечень объектов, событий или отклонений, относящихся к «Распознавание состояния пользователя и предложение безопасной помощи», с локализацией, уверенностью и признаками срабатывания. Критерии приёмки: по полноте обнаружения, доле ложных срабатываний и качеству локализации на независимой выборке; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
255Преобразование визуальной информации в тактильное или звуковое представление. — Практическая реализация: AI сначала определяет элементы, которые должны сохраниться, затем перестраивает форму представления и отмечает внесённые изменения. Предметная логика: работает одновременно со спектральной структурой, ритмом и временной динамикой сигнала. Входной контекст включает аудиодорожки, контент, интерфейсы, сенсорные сигналы и индивидуальные потребности. Формат результата: преобразованный материал по задаче «Преобразование визуальной информации в тактильное или звуковое представление» с сохранённым содержанием и журналом значимых изменений. Ошибки выявляют сравнением смысла и структуры до и после преобразования, а также поиском потерянных элементов; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
256Автоматическая проверка цифрового контента на доступность. — Механизм: AI выполняет набор автоматических проверок и сохраняет доказательства для каждого пройденного или нарушенного условия. Исходные данные: интерфейсы, сенсорные сигналы, индивидуальные потребности и настройки доступности. Формат результата: протокол выполнения «Автоматическая проверка цифрового контента на доступность» с пройденными условиями, найденными нарушениями и спорными местами для ручного решения. Проверка: повторным запуском на эталонных примерах, ручной проверкой спорных случаев и полнотой контрольного покрытия; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров. <a id="section-ii-1"></a>

0 моделей