/ Профессии
Универсальные способности и операции

I.15Доступность и ассистивные технологии

В разделе собраны самостоятельные задачи, где AI помогает делать цифровую и физическую среду доступнее для людей с различными ограничениями. Для каждого пункта отдельно указаны механизм, входы, результат и способ проверки.

ЗрениеАудиоЭмбеддингиТекст
AI-задач
17
в этой профессии
Подходящих моделей
8 953
по типу задач и модальности
Категория
I. Универсальные способности
Основные типы
ЗрениеАудиоЭмбеддинги

Рекомендованные модели

8 953 модели
Загрузки
Лайки
Дата выхода
5 851–5 880 из 8 953
nari-labs
Dia2-1B

Dia2-1B — потоковая диалоговая модель синтеза речи, разработанная Nari Labs. Она начинает генерировать аудио после получения первых слов и может использовать входное аудио для управления звучанием диалога. Репозиторий содержит веса в формате safetensors и код для запуска; модель рассчитана на генерацию речи на английском языке продолжительностью до двух минут. Модель предназначена для диалоговой речи в сценариях с низкой задержкой, включая интерактивные голосовые приложения. Для запуска README указывает CUDA 12.8 или новее; пример использует bfloat16. Доступны отметки времени слов относительно аудиокадров Mimi. Лицензия — Apache-2.0. Разработчики запрещают имитацию реальных людей без разрешения, вводящую в заблуждение генерацию и незаконное или вредоносное применение.

1.0K27нояб. 2025ctx8.2K
textaudioapache-2.0hugging-face
RyeAI
ekko-pnc

Ekko PnC v2 — модель RyeAI для восстановления пунктуации, границ предложений и заглавных букв в датских транскриптах речи. Она сохраняет исходные слова и их порядок, поэтому подходит для обработки расшифровок с временными метками слов, диктовок и записей совещаний. Модель построена на ELECTRA и дообучена на jonfd/electra-small-nordic; размер — 37,2 млн параметров, контекст — до 512 токенов. Доступны веса Safetensors и ONNX, включая вариант ONNX с квантованием int8 для локального запуска. Модель принимает текст и предсказывает разметку токенов, на основе которой расставляет запятые, точки, вопросительные и восклицательные знаки, а также восстанавливает регистр. По данным карточки, версия v2 заметно лучше предыдущей обрабатывает длинную непрерывную речь и границы предложений, но на очень коротких фрагментах может добавлять лишние точки. Вопросительные знаки остаются слабым классом; модель не использует паузы или интонацию и не восстанавливает внутренний регистр слов вроде iPhone из строчной записи. Лицензия — CC BY 4.0.

8305авг. 2026ctx512
textcc-by-4.0hugging-face
klhashim
glm-4.7-flash-JP-EN-prune

Это производная модель GLM-4.7-Flash, предназначенная для перевода японских субтитров на английский. В карточке указано, что при прореживании экспертов измерили их использование на данных субтитров и удалили наименее используемые эксперты: число экспертов на слой сократили с 64 до 32. Метаданные относят модель к семейству glm4_moe_lite и архитектуре для авторегрессионной генерации текста; репозиторий содержит веса Safetensors и использует библиотеку Transformers. Метаданные указывают 4,1 млрд параметров и контекст до 202 752 токенов; README приводит оценку около 16 млрд параметров до прореживания. Поддерживаемые языки — японский и английский. Модель распространяется под лицензией MIT. Карточка не приводит результатов оценки качества, подробностей обучающих данных или конкретных ограничений, поэтому пригодность для конкретного сценария перевода стоит проверять на собственных примерах.

140июнь 2026ctx202.8K
textmithugging-face
Reza2kn
gooya-v1

Gooya V1 — модель синтеза персидской речи, созданная Reza2kn как LoRA-дообучение Gooya 0.1 на базе MOSS-TTS-Nano-100M. Обучение проходило в два этапа: на корпусе из 102 084 одобренных аудиофрагментов с фонемами v7 G2P и на 2 707 более длинных фрагментах для улучшения непрерывной речи. LoRA с рангом 16 применена к линейным слоям трансформера; веса представлены в формате PyTorch и bf16. Модель предназначена для озвучивания персидского текста и синтеза речи с клонированием голоса. Для инференса текст нужно преобразовать в фонемы v7 G2P с пробелами между символами. По карточке, усиление обучения на длинных фрагментах позволяет генерировать до 12–16 секунд речи за один проход и уменьшает артефакт дыхания посреди слова. Для сэмплирования автор рекомендует audio_temperature около 0,6 и audio_top_p около 0,9; стандартная температура 1,7 может вызывать дрожание звучания. Лицензия указана как other, конкретные условия в предоставленных данных не описаны.

331авг. 2026ctx32.8K
textotherhugging-face
Mungert
Holo2-30B-A3B-GGUF

Mungert/Holo2-30B-A3B-GGUF — GGUF-квантизированная мультимодальная vision-language модель, разработанная H Company и опубликованная пользователем Mungert. Она создана на основе Qwen/Qwen3-VL-30B-A3B-Thinking и предназначена для навигации и управления графическими интерфейсами веб-приложений, настольных и мобильных систем. Модель ориентирована на GUI-агентов, которые анализируют содержимое экрана, локализуют элементы интерфейса, рассуждают над многошаговыми задачами и выполняют действия в цифровой среде. Модель относится к семейству Holo2-30B-A3B и использует архитектуру Mixture of Experts с заявленными 30B параметров и 3B активных параметров. Она поддерживает обработку текста и изображений; в карточке указано, что заявленный язык — английский. Контекстное окно и точный перечень поддерживаемых форматов входных данных не указаны. Версия распространяется в формате GGUF и создана с использованием llama.cpp; применённый подход к квантизации повышает точность отдельных важных слоёв по сравнению с базовой конфигурацией IMatrix, но может увеличивать размер файла. Сильные стороны модели — понимание интерфейсов, визуальная локализация элементов, выполнение многошаговых действий и обобщение между различными средами. В README приведены результаты на WebVoyager, WebArena, OSWorld и AndroidWorld, однако их следует считать заявленными авторами показателями. Ограничения включают исследовательскую направленность, возможное снижение точности при низкой разрядности квантизации и отсутствие данных о контекстном окне. Для конкретной 30B-A3B версии указана лицензия CC BY-NC 4.0 и некоммерческое использование; в исходном описании семейства также упоминается research-only license, поэтому коммерческое применение требует отдельного разрешения правообладателя.

1.4K0нояб. 2025
textimagecc-by-nc-4.0hugging-face
lmms-lab
LongVA-7B-DPO

LongVA-7B-DPO — мультимодальная модель семейства LlavaQwen от команды LongVA, представленная в репозитории lmms-lab. Модель содержит 7,1 млрд параметров и предназначена для диалоговой генерации текста с анализом длинных визуальных последовательностей, в том числе видео. В карточке заявлена обработка до 2000 кадров или более 200 тысяч визуальных токенов; модель показывает высокие результаты на Video-MME среди моделей с 7 млрд параметров. Модель подходит для вопросов и ответов по видео и длинным последовательностям изображений. Метаданные указывают на архитектуру LlavaQwen, поддержку чата и формат Safetensors; заявленная длина контекста составляет 224 000 токенов. Данные карточки не уточняют поддерживаемые естественные языки и лицензию, поэтому условия использования следует проверять в репозитории модели.

93310июнь 2024ctx224K
texthugging-face
TIGER-Lab
Mantis-bakllava-7b

Mantis-bakllava-7b — мультимодальная диалоговая модель TIGER-Lab для ответов на вопросы и рассуждений по изображениям. Она дообучена на базе llava-hf/bakLlava-v1-hf с использованием набора Mantis-Instruct, предназначенного для задач с несколькими изображениями. Модель принимает текст и изображения и выдаёт текстовые ответы; поддерживает диалог, в котором чередуются текст и изображения. В метаданных указаны архитектура LLaVA, плотная модель и формат safetensors. Карточка помечает эту версию как устаревшую и рекомендует более новую Mantis-Siglip-llama3, которая, по заявлению авторов, лучше справляется с задачами по одному и нескольким изображениям. Лицензия — Apache-2.0.

135апр. 2024
textimageapache-2.0hugging-face
Professor
mms-300m-fongbe

Professor разработал эту модель на основе facebook/mms-300m, дообучив её для автоматического распознавания речи на языке фон (фɔнгбе), тональном языке, распространённом в Бенине. Модель использует архитектуру Wav2Vec2 с выходной головой CTC и содержит 402,7 млн параметров; она принимает аудио с частотой дискретизации 16 кГц и преобразует речь в текст. Модель предназначена для расшифровки речи на фон и сохранения тоновых диакритических знаков и специальных букв, включая ɖ, ɛ и ɔ. В тесте ALFFA на 2168 высказываниях автор сообщает WER 9,48% и CER 3,96%. Её также можно использовать как основу для дальнейших исследований и разработки инструментов для языка фон. В карточке указаны ограничения: качество может снижаться при шуме и фоновой музыке; для отдельных диалектов и быстрой разговорной речи может потребоваться дополнительная настройка. Лицензия CC BY-NC 4.0 разрешает использование с указанием авторства, но запрещает коммерческое применение.

6230февр. 2026
textaudiocc-by-nc-4.0hugging-face
facebook
mms-tts-enx

facebook/mms-tts-enx — модель синтеза речи на языке энxет (Enxet, код enx), разработанная Meta в рамках проекта Massively Multilingual Speech (MMS). Она преобразует входной текст в речевую аудиоволну и предназначена для озвучивания текста на этом языке. Модель использует архитектуру VITS — сквозную условную вариационную автоэнкодерную систему с текстовым энкодером, нормализующими потоками, стохастическим предсказателем длительности и декодером в стиле HiFi-GAN. Размер модели — 3,5 млн параметров; она доступна для PyTorch и Safetensors и поддерживается библиотекой Transformers версии 4.33 и выше. Стохастический предсказатель длительности позволяет получать варианты ритма для одного и того же текста, поэтому результаты генерации могут различаться; фиксированный seed нужен для повторения того же аудио. Лицензия CC BY-NC 4.0 разрешает использование с указанием авторства, но некоммерческое.

950сент. 2023
textaudiocc-by-nc-4.0hugging-face
Ertugrul
Qwen2-VL-7B-Captioner-Relaxed

Ertugrul/Qwen2-VL-7B-Captioner-Relaxed — дообученная мультимодальная модель на основе Qwen2-VL-7B-Instruct, созданная для подробного описания изображений. Она формирует развернутые подписи на естественном английском языке, описывает объекты и их расположение и предназначена, в частности, для подготовки текстовых описаний для наборов данных генерации изображений. Модель содержит 7,1 млрд параметров, использует архитектуру Qwen2-VL и принимает изображения с текстовыми инструкциями; контекст — до 32 768 токенов. Дообучение на вручную отобранном наборе данных направлено на более подробные и свободные описания, которые можно использовать в системах text-to-image. Карточка указывает, что качество на других задачах может быть ниже, чем у исходной модели: например, результат на mmmu_val снизился примерно на 10%. Модель распространяется по лицензии Apache-2.0.

4763сент. 2024ctx32.8K
textimageapache-2.0hugging-face
alkhrzmy
qwen3-tts-0.6b-sundanese

alkhrzmy дообучил Qwen3-TTS 0.6B для синтеза речи на сунданском языке. Модель построена на архитектуре Qwen3-TTS и предназначена для преобразования текста в речь с использованием голоса `sunda_speaker`; при обучении использовался датасет OpenSLR SLR44 с женским голосом, полученным из Mozilla Common Voice. Модель содержит 0,6 млрд параметров и распространяется в формате safetensors. Она подходит для озвучивания сунданского текста и создания речевых образцов фиксированным голосом. Базовая модель также поддерживает синтез речи и клонирование голоса по аудиопримеру, однако карточка этого дообученного варианта описывает только синтез заданным голосом. Лицензия — Apache-2.0.

80авг. 2026ctx131.1K
textaudioapache-2.0hugging-face
ByteDance
Sa2VA-Qwen3-VL-4B-SAM3

Sa2VA-Qwen3-VL-4B-SAM3 — мультимодальная модель ByteDance для диалога и сегментации объектов по текстовому описанию на изображениях и видео. Она построена на Qwen3-VL-4B-Instruct и использует энкодер SAM3 с трекером PVS: модель предсказывает токен [SEG], скрытое состояние которого задаёт декодеру SAM3 условие для формирования маски объекта. Модель предназначена для сегментации по выражению на естественном языке, отслеживания описанного объекта в видео и генерации ответов в диалоге с визуальным заземлением. В README приведены результаты на наборах RefCOCO, RefCOCO+, RefCOCOg, MeViS, ReVOS и Ref-DAVIS17. Репозиторий содержит код SAM3 для заземления; для загрузки README рекомендует bfloat16, поскольку автоматический выбор смешанных типов данных может привести к ошибке. Модель использует архитектуру Sa2VA с Qwen3-VL-4B-Instruct и SAM3, распространяется в формате safetensors и имеет лицензию Apache-2.0. В метаданных указан тег image-text-to-text; поддержка видео для сегментации описана в README. Языки и длина контекста в доступных данных не приведены.

8673июнь 2026ctx262.1K
textapache-2.0hugging-face
teckedd
serendepify-gsl-asr-ak-gnlp-whisper-small-only-lowlr-freezeenc-fullft-v0.5

Это экспериментальная модель распознавания речи Akan, подготовленная Ghanaian Speech Lab для серии Serendepify GSL. Модель основана на Whisper Small с 153,1 млн параметров и дообучена на данных GhanaNLP; при этом энкодер Whisper был заморожен, а остальные параметры прошли полное дообучение с низкой скоростью обучения. Модель предназначена для преобразования речи на Akan в текст. В обучении использовались 10 000 строк GhanaNLP, а набор Waxal применялся только для проверки регрессии. Это реальный обучающий запуск, однако авторы считают его кандидатом на проверку: оценка на отложенной выборке и анализ типов ошибок ещё не завершены. Лицензия — CC BY-SA 4.0.

40июнь 2026ctx1K
textaudiocc-by-sa-4.0hugging-face
HaochenWang
TreeVGR-7B

TreeVGR-7B — мультимодальная модель для визуального рассуждения с привязкой выводов к областям изображения, представленная авторами работы Traceable Evidence Enhanced Visual Grounded Reasoning: Evaluation and Methodology. Она дообучена на базе Qwen/Qwen2.5-VL-7B-Instruct и предназначена для вопросов по изображениям, локализации объектов и объяснения ответов с проверяемыми визуальными свидетельствами. Модель содержит 7,1 млрд параметров, использует плотную архитектуру Qwen2.5-VL и принимает изображения вместе с текстовыми запросами, выдавая текстовые ответы. Заявленный контекст — 128 000 токенов. Обучение сочетает supervised fine-tuning и обучение с подкреплением; авторы сообщают об улучшении результатов на V* Bench, MME-RealWorld и TreeBench. Репозиторий содержит веса Safetensors, используется библиотека Transformers. TreeVGR ориентирована на сложные сцены с множеством объектов, тонкие визуальные детали, пространственные отношения и взаимодействия объектов. В README описан локальный демонстрационный запуск на TreeBench; для установки требуются зависимости проекта и FlashAttention. Лицензия — Apache 2.0. Ограничение: заявленные результаты относятся к указанным визуальным бенчмаркам; README не приводит подробностей о качестве на других типах изображений или языках.

1935июль 2025ctx128K
textimageapache-2.0hugging-face
speechbrain
tts-hifigan-ljspeech

Это вокодер HiFi-GAN от SpeechBrain, обученный на наборе LJSpeech. Он принимает мел-спектрограмму и преобразует её в речевую звуковую волну с частотой дискретизации 22 050 Гц; обычно его используют после модели синтеза речи, которая строит спектрограмму из текста. Репозиторий содержит предварительно обученные веса в формате PyTorch. Модель рассчитана прежде всего на речь одного диктора и английский язык, соответствующий обучающему набору LJSpeech. Она может обобщать на голоса других дикторов, но качество в таком режиме может быть ниже; для многодикторной речи авторы рекомендуют вокодер, обученный на LibriTTS. Лицензия — Apache-2.0.

2.3K39май 2022
textaudioapache-2.0hugging-face
lmstudio-community
UI-TARS-7B-DPO-GGUF

UI-TARS-7B-DPO-GGUF — мультимодальная модель для взаимодействия с графическими интерфейсами, разработанная на основе UI-TARS-7B-DPO от Bytedance Research. Это дообученная версия reasoning-модели Qwen VL, созданная для GUI-агентов с человекоподобным восприятием, рассуждением и выполнением действий. Модель предназначена для сценариев автоматизации интерфейсов, где требуется анализ визуального содержимого и формирование действий на его основе. Модель содержит около 7 миллиардов параметров и распространяется в формате GGUF. Квантизацию выполнил bartowski на базе llama.cpp версии b4514. В карточке указана поддержка мультимодального режима image-text-to-text и английского языка. Размер контекста, конкретные поддерживаемые варианты входных изображений и характеристики отдельных уровней квантизации не указаны, поэтому их следует уточнять для конкретного файла модели. К сильным сторонам относятся сочетание визуального анализа, рассуждений и ориентации на управление GUI, а также возможность локального запуска благодаря формату GGUF. Ограничениями являются потенциальная потеря качества из-за квантизации и отсутствие в предоставленных данных подробных оценок точности, требований к оборудованию и результатов тестирования. Лицензия модели указана как Apache-2.0.

2.4K10янв. 2025
textimageapache-2.0hugging-face
inclusionAI
UI-Venus-2-9B

UI-Venus-2-9B — мультимодальный агент для управления графическими интерфейсами от inclusionAI. Он наблюдает экран, определяет состояние задачи, выбирает действие и использует обратную связь среды, чтобы продолжить работу в мобильных приложениях, веб-сервисах и настольных операционных системах. Модель построена на архитектуре Qwen3.5-9B и дообучена для визуального заземления, навигации и выполнения действий в интерфейсе; заявленная конфигурация обслуживания допускает контекст до 262144 токенов. Модель предназначена для сквозного выполнения задач в GUI, включая поиск и взаимодействие с элементами, работу с CAPTCHA, навигацию по сайтам и использование приложений. В README описаны многоязычные мобильные среды с приложениями на китайском и английском языках, веб-среды и задачи для настольных ОС. По сравнению с базовой Qwen3.5-9B модель показывает более низкий Attack Success Rate на тестах OSHarm и OSBlind, однако риск вредоносных действий сохраняется. Лицензия весов на момент карточки ожидает окончательного подтверждения; Apache-2.0 не следует считать действующей лицензией.

16K43авг. 2026ctx262.1K
textimagehugging-face
patrickvonplaten
unispeech-large-1500h-cv-timit

UniSpeech Large с архитектурой CTC, дообученная автором репозитория на наборе TIMIT_ASR - NA на основе microsoft/unispeech-large-1500h-cv. Модель предназначена для автоматического распознавания речи и преобразования аудиозаписей в текст; в метаданных указано около 402,7 млн параметров. На оценочной выборке README сообщает Loss 0,3099 и WER 0,2196. Данные не уточняют поддерживаемые языки, условия записи и область применения набора TIMIT_ASR - NA, поэтому результаты нельзя уверенно переносить на другие наборы данных и сценарии. Репозиторий содержит веса в формате PyTorch; лицензия в предоставленных сведениях не указана.

1990март 2022
textaudiohugging-face
yuanqianhao
Vision-OPD-4B

Vision-OPD-4B — мультимодальная языковая модель для понимания изображений, разработанная на основе Qwen/Qwen3.5-4B и дообученная методом Vision On-Policy Distillation. Метод переносит умение отвечать на вопросы по мелким деталям с изображения-фрагмента на целое изображение: модель обучается на собственных ответах, сопоставляя восприятие фрагмента и полного изображения. Для этого использован набор из 6,2 тысячи синтетических примеров Vision-OPD-6K. Модель предназначена для диалога по изображениям и вопросов, требующих распознавания небольших объектов и визуальных деталей. При обработке целого изображения она учитывает тонкие детали за один проход, без внешних инструментов увеличения или многошагового агента. Поддерживаемые языки по карточке — английский и китайский. Модель загружается через Transformers и распространяется по лицензии Apache-2.0. В README заявлено улучшение тонкого визуального понимания при сохранении общих мультимодальных возможностей на тестах. Это заявление основано на оценках авторов; фактическое качество может зависеть от изображения и формулировки запроса.

3204июль 2026ctx262.1K
textimageapache-2.0hugging-face
vocaela
Vocaela-500M

Vocaela-500M — компактная мультимодальная модель для управления графическими интерфейсами компьютеров и мобильных устройств. Согласно карточке, это дообученная версия HuggingFaceTB/SmolVLM2-500M-Video-Instruct с архитектурой SmolVLM и 500 млн параметров. Модель принимает снимок экрана и инструкцию на естественном языке, а затем выдаёт структурированные действия в формате JSON: например, нажатие клавиш, ввод текста, щелчки, перетаскивание и прокрутку с координатами элементов. Модель предназначена для GUI-агентов, которым нужно выполнять конкретные действия на экране; её компактный размер рассчитан на запуск на ноутбуках и мобильных устройствах. Карточка приводит английский пример инструкции, а метаданные указывают английский язык. Контекстное окно в предоставленных источниках не описано. В репозитории указаны веса Safetensors и лицензия CC BY-NC-SA 4.0, предусматривающая некоммерческое использование и распространение на тех же условиях.

1625окт. 2025ctx8.2K
textimagecc-by-nc-sa-4.0hugging-face
JayLL13
VoxCPM-1.5-VN

JayLL13/VoxCPM-1.5-VN — дообученный на вьетнамском корпусе vivoice-relabeled чекпойнт модели VoxCPM1.5 от OpenBMB для синтеза речи из текста. В README указан обучающий набор объёмом 1000 часов, контрольная точка на 100 000-й итерации и частота дискретизации синтезируемого аудио 44,1 кГц. Модель предназначена для генерации речи на вьетнамском языке; базовая VoxCPM1.5 также поддерживает клонирование голоса по короткому аудиофрагменту. Репозиторий содержит веса в формате safetensors и распространяется по лицензии CC BY-SA 4.0. Автор позиционирует модель для исследований, экспериментов и разработки технологий и запрещает неправомерное копирование голоса, выдачу синтетической речи за речь реального человека и другие обманные сценарии.

7922дек. 2025
textaudiocc-by-sa-4.0hugging-face
LeBenchmark
wav2vec2-FR-7K-large

LeBenchmark/wav2vec2-FR-7K-large — предварительно обученная модель wav2vec 2.0, выпущенная проектом LeBenchmark. Это крупная плотная модель с 402,7 млн параметров, обученная на 7,6 тыс. часов французской речи, включая спонтанную, прочитанную и транслируемую речь. Модель создаёт акустические представления речи и предназначена для извлечения признаков, которые можно использовать в системах распознавания речи, распознавания говорящего и разделения источников звука. Модель можно дообучать для распознавания речи с CTC через Fairseq или применять как замороженный кодировщик признаков в SpeechBrain; также описано экспериментальное дообучение вместе с последующей задачей. Карточка предупреждает, что результаты преобразования речи в текст с CTC не обязательно будут передовыми. Модель распространяется по лицензии Apache-2.0; при этом наборы данных и бенчмарки могут зависеть от корпусов с ограниченной доступностью.

58313март 2022
textembeddingapache-2.0hugging-face
anantoj
wav2vec2-xls-r-300m-zh-CN

anantoj/wav2vec2-xls-r-300m-zh-CN — модель автоматического распознавания речи на основе wav2vec2, дообученная на наборе COMMON_VOICE — ZH-CN. Архитектура использует CTC; размер модели — 407,4 млн параметров. Модель принимает аудио и преобразует речь в текст на китайском языке (упрощённое письмо, zh-CN). В опубликованной оценке указаны WER 0,8392 и CER 0,2059; высокая ошибка слов указывает на ограниченную точность распознавания. Модель предназначена для транскрибирования китайской речи. Она распространяется в формате PyTorch по лицензии Apache-2.0. README не содержит дополнительных сведений о рекомендуемых сценариях, условиях записи или ограничениях.

170март 2022
textaudioapache-2.0hugging-face
clu-ling
whisper-large-v2-arabic-5k-steps

clu-ling/whisper-large-v2-arabic-5k-steps — модель распознавания речи, созданная дообучением openai/whisper-large-v2 на арабской части Common Voice 11.0. Это плотная модель Whisper с 905,2 млн параметров, опубликованная в формате PyTorch и распространяемая по лицензии Apache-2.0. Модель предназначена для преобразования арабской речи в текст. Её обучали 5000 шагов; на тестовой выборке Common Voice 11.0 указана WER 0,4239 и loss 0,3434. Автор предупреждает, что качество транскрипций может быть недостаточным для пользователей, поэтому чекпойнт больше подходит для экспериментов и оценки дообучения.

123янв. 2023ctx1K
textaudioapache-2.0hugging-face
DrishtiSharma
whisper-large-v2-hausa

Drishti Sharma дообучила OpenAI Whisper Large-v2 для автоматического распознавания речи. Модель содержит 905,2 млн параметров и предназначена для преобразования аудио в текст; в метаданных указан язык хауса и набор данных Common Voice 11.0. В README название противоречит идентификатору репозитория: оно говорит о непали, тогда как метаданные указывают хауса, поэтому язык назначения нельзя подтвердить однозначно. На оценочной выборке Common Voice 11.0 приведены Loss 0,5364 и WER 36,5689; это указывает на заметные ошибки распознавания. Модель опубликована в формате PyTorch по лицензии Apache-2.0.

85дек. 2022ctx1K
textaudioapache-2.0hugging-face
kktoto
wwdd_tiny

kktoto/wwdd_tiny — компактная модель token classification, опубликованная пользователем kktoto на Hugging Face. Она построена на архитектуре BERT и предназначена для токен-классификации в задачах восстановления пунктуации в тексте. Модель содержит около 12,6 млн параметров, использует 4 скрытых слоя, размер скрытого представления 312, 12 attention-heads и поддерживает контекст до 512 токенов. Выходные классы включают NORM, COMMA, PERIOD, QUEST_MARK и EXCLAMATION, то есть обычный текст без знаков препинания преобразуется в последовательность токенов с предсказанными знаками препинания. Модель подходит для автоматической расстановки запятых, точек, вопросительных и восклицательных знаков, включая сценарии постобработки распознанной речи. Ограничения связаны с узким набором классов пунктуации, лимитом контекста 512 токенов и отсутствием подробной карточки модели с описанием обучающего набора, метрик и условий применения.

190июнь 2022ctx512
texthugging-face
agbalu
Belaid-31M

Belaid-31M — модель на 30,9 млн параметров, разработанная для восстановления пунктуации и регистра букв в текстах на кабильском языке (Taqbaylit) латиницей. Это дообучение agbalu/Masinissa-31M для поклассовой разметки токенов; модель принимает текст без пунктуации и заглавных букв и предсказывает знак после каждого слова и его регистр. Контекст ограничен 512 токенами. Модель предназначена прежде всего для постобработки текста распознавания речи, а также для подготовки субтитров, титров и текстовых корпусов к чтению. На тесте Common Voice указаны macro-F1 0,793 по знакам и точное совпадение всего предложения в 86,3% случаев; на отложенной прозе показатели ниже. Модель сохраняет исходное написание слов и работает только с текстом, не используя аудио. Она рассчитана на одну реплику за раз и не сегментирует абзацы на предложения. Расстановка запятых менее надёжна, а перенос на другие берберские языки не подтверждён. Для загрузки используются Transformers, PyTorch и код архитектуры из репозитория с trust_remote_code=True. Лицензия — Apache-2.0.

200авг. 2026ctx512
textapache-2.0hugging-face
JorisCos
ConvTasNet_Libri2Mix_sepclean_16k

ConvTasNet для разделения двух одновременно звучащих голосов, обученная Joris Cosentino с помощью рецепта LibriMix в Asteroid на задаче sep_clean датасета Libri2Mix. Модель принимает аудио с частотой дискретизации 16 кГц и формирует отдельные аудиодорожки для двух источников. Архитектура ConvTasNet использует обучаемый фильтробанк и масочную сеть; обучающие сегменты имели длину 3 секунды. Модель предназначена для разделения чистых речевых смесей, похожих на данные Libri2Mix. Карточка приводит результат на тестовом наборе Libri2Mix, но численное значение результата недоступно в представленном тексте. Модель распространяется по лицензии CC BY-SA 3.0 Unported; в обучении использовался корпус LibriSpeech, лицензированный CC BY 4.0.

2.6K5март 2022
audiocc-by-sa-4.0hugging-face
eustlb
csm-1b

CSM 1B — модель генерации речи Sesame, представленная в варианте примерно на 977 млн параметров. Она использует языковую основу Llama и небольшой аудиодекодер, который генерирует аудиокоды Mimi на основе текста и аудиоконтекста. Модель поддерживается библиотекой Transformers и допускает дообучение через Trainer. Модель предназначена для синтеза речи из текста и может создавать разные голоса; конкретный голос отдельно не настраивался. Контекстная длина — 2048 токенов. Основной язык карточки — английский; авторы отмечают ограниченную способность работать с другими языками. Модель не генерирует текст и не является универсальной мультимодальной языковой моделью. Лицензия — Apache-2.0. Авторы запрещают использовать модель для имитации реальных людей без их согласия, обмана и незаконной или вредоносной деятельности; качество речи на языках помимо английского может быть низким.

7983март 2025ctx2K
textaudioapache-2.0hugging-face
otheru
DeepSeek-V4-Flash-Vision-Strix-Halo-GGUF

DeepSeek-V4-Flash-Vision-Strix-Halo-GGUF — мультимодальная версия DeepSeek-V4-Flash-Vision-Exp, подготовленная автором репозитория для запуска на AMD Strix Halo (gfx1151) через Ember. Это аблитерированная, откалиброванная по матрице важности GGUF-квантизация с эффективной точностью 2,58 BPW; в комплект входят башня зрения в F16 и черновая модель DSpark. Основная модель занимает около 85,3 ГиБ, а весь набор с башней и черновой моделью — около 96,3 ГиБ в памяти. Модель принимает текст и изображения и отвечает на вопросы о содержимом изображений, включая распознавание текста, подсчёт объектов и пространственные вопросы. Изображения обрабатываются только при наличии отдельной башни зрения и должны быть неинтерлейсными PNG в RGB/RGBA8. README приводит проверки на синтетических и естественных вопросах, но не заявляет поддержки конкретных языков. Для запуска требуется AMD Strix Halo и Ember либо совместимый движок с поддержкой графа deepseek4, типов ROCmFPx и маршрутизации токенов изображения. В README не приведены условия лицензии, а в метаданных указана лицензия other. Это производный экспериментальный артефакт; его пригодность зависит от требуемого оборудования и runtime.

5.7K4сент. 2026
textimageotherhugging-face

Задачи профессии

17 задач
240Автоматическое описание изображения для незрячего пользователя. — Механизм: AI собирает содержание и структуру из заданных ограничений, затем формирует несколько вариантов для выбора и доработки. Предметная логика: анализирует форму, текстуру, цвет и пространственные отношения, учитывая масштаб и качество изображения. Исходные данные: изображения, контент, интерфейсы, сенсорные сигналы и индивидуальные потребности. Формат результата: редактируемый артефакт по задаче «Автоматическое описание изображения для незрячего пользователя», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — ассистивный результат. Проверка: по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
241Описание окружающей сцены через камеру в реальном времени. — AI генерирует черновой результат, согласованный с контекстом, форматом и стилевыми требованиями задачи. К исходным данным относятся интерфейсы, сенсорные сигналы, индивидуальные потребности и настройки доступности. Формат результата: редактируемый артефакт по задаче «Описание окружающей сцены через камеру в реальном времени», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — ассистивный результат. Надёжность оценивают по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
242Чтение печатного текста и интерфейсов вслух. — Для этой задачи система находит нужные фрагменты в исходном материале, распознаёт их роль и переносит в заданные структурированные поля. Рабочие входы: сенсорные сигналы, индивидуальные потребности, настройки доступности и контент. Формат результата: структурированные данные, полученные в рамках «Чтение печатного текста и интерфейсов вслух», с нормализованными значениями и ссылками на исходные фрагменты. Критерии приёмки: посимвольной или пополевой сверкой с оригиналом и проверкой обязательных полей; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
243Распознавание препятствий и помощь в навигации. — Практическая реализация: AI анализирует поток наблюдений и локализует признаки, которые отличают целевой объект или нарушение от обычного состояния. Входной контекст включает индивидуальные потребности, настройки доступности, контент и интерфейсы. Формат результата: перечень объектов, событий или отклонений, относящихся к «Распознавание препятствий и помощь в навигации», с локализацией, уверенностью и признаками срабатывания. Ошибки выявляют по полноте обнаружения, доле ложных срабатываний и качеству локализации на независимой выборке; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
244Живые субтитры с разделением говорящих и описанием значимых неречевых звуков. — Механизм: AI генерирует черновой результат, согласованный с контекстом, форматом и стилевыми требованиями задачи. Предметная логика: согласует перевод или текст с длительностью сцены, паузами и артикуляцией. Исходные данные: речевая дорожка, настройки доступности, контент, интерфейсы и сенсорные сигналы. Формат результата: редактируемый артефакт по задаче «Живые субтитры с разделением говорящих и описанием значимых неречевых звуков», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — ассистивный результат. Проверка: по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
245Выделение речи на фоне шума для улучшения разборчивости. — AI находит нужные фрагменты в исходном материале, распознаёт их роль и переносит в заданные структурированные поля. Предметная логика: распознаёт речь, разделяет участников и связывает реплики с темами, решениями и действиями. К исходным данным относятся аудиопоток, контент, интерфейсы, сенсорные сигналы и индивидуальные потребности. Формат результата: структурированные данные, полученные в рамках «Выделение речи на фоне шума для улучшения разборчивости», с нормализованными значениями и ссылками на исходные фрагменты. Надёжность оценивают посимвольной или пополевой сверкой с оригиналом и проверкой обязательных полей; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
246Распознавание жестового языка. — Для этой задачи система анализирует поток наблюдений и локализует признаки, которые отличают целевой объект или нарушение от обычного состояния. Рабочие входы: интерфейсы, сенсорные сигналы, индивидуальные потребности и настройки доступности. Формат результата: перечень объектов, событий или отклонений, относящихся к «Распознавание жестового языка», с локализацией, уверенностью и признаками срабатывания. Критерии приёмки: по полноте обнаружения, доле ложных срабатываний и качеству локализации на независимой выборке; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
247Генерация жестового перевода с помощью аватара. — Практическая реализация: AI генерирует черновой результат, согласованный с контекстом, форматом и стилевыми требованиями задачи. Предметная логика: сохраняет значение, числа, имена и терминологию, одновременно адаптируя форму к нормам целевого языка. Входной контекст включает исходный материал, сенсорные сигналы, индивидуальные потребности, настройки доступности и контент. Формат результата: редактируемый артефакт по задаче «Генерация жестового перевода с помощью аватара», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — ассистивный результат. Ошибки выявляют по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
248Предсказание фраз в альтернативной и дополнительной коммуникации. — Механизм: AI строит прогностическую модель на исторических наблюдениях, добавляет текущие сигналы и оценивает несколько вариантов развития. Исходные данные: индивидуальные потребности, настройки доступности, контент и интерфейсы. Формат результата: прогноз для условия «Предсказание фраз в альтернативной и дополнительной коммуникации» с горизонтом, вероятностями сценариев, диапазоном неопределённости и главными влияющими факторами. Проверка: на отложенных периодах, по калибровке вероятностей, ошибке прогноза и устойчивости к изменению предпосылок; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
249Синтез персонального голоса для человека, утратившего речь. — AI сначала определяет элементы, которые должны сохраниться, затем перестраивает форму представления и отмечает внесённые изменения. Предметная логика: моделирует фонетику, просодию и тембр, сохраняя естественность и разборчивость. К исходным данным относятся текст, настройки доступности, контент, интерфейсы и сенсорные сигналы. Формат результата: преобразованный материал по задаче «Синтез персонального голоса для человека, утратившего речь» с сохранённым содержанием и журналом значимых изменений. Надёжность оценивают сравнением смысла и структуры до и после преобразования, а также поиском потерянных элементов; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
250Преобразование материала в формат easy-to-read с короткими фразами, символами и проверяемой структурой. — Для этой задачи система переводит объект в новый формат или вид, контролируя потери информации и нежелательные артефакты. Предметная логика: учитывает расположение элементов, связь между страницами и документные правила, а не только распознанный текст. Рабочие входы: оригиналы документов, контент, интерфейсы, сенсорные сигналы и индивидуальные потребности. Формат результата: преобразованный материал по задаче «Преобразование материала в формат easy-to-read с короткими фразами, символами и проверяемой структурой» с сохранённым содержанием и журналом значимых изменений. Критерии приёмки: сравнением смысла и структуры до и после преобразования, а также поиском потерянных элементов; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
251Голосовое, жестовое или взглядовое управление устройством. — Практическая реализация: AI оценивает текущее состояние, рассчитывает управляющее воздействие и корректирует его по обратной связи. Предметная логика: моделирует фонетику, просодию и тембр, сохраняя естественность и разборчивость. Входной контекст включает текст, интерфейсы, сенсорные сигналы, индивидуальные потребности и настройки доступности. Формат результата: управляющее решение для «Голосовое, жестовое или взглядовое управление устройством» с ожидаемым эффектом, допустимыми пределами и условиями безопасной остановки. Ошибки выявляют в симуляции и контролируемых испытаниях, с проверкой устойчивости и независимых аварийных ограничений; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
252Персональная адаптация размера, контраста и структуры интерфейса. — Механизм: AI учитывает историю поведения и текущий контекст, но ограничивает персонализацию правилами разнообразия и справедливости. Предметная логика: находит чувствительные фрагменты и заменяет их так, чтобы исключить обратное раскрытие через контекст. Исходные данные: текст и изображения, сенсорные сигналы, индивидуальные потребности, настройки доступности и контент. Формат результата: адаптированный вариант для «Персональная адаптация размера, контраста и структуры интерфейса» с указанием контекста и факторов, определивших персонализацию. Проверка: по пользовательской обратной связи, долгосрочной полезности и отсутствию нежелательной дискриминации; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
253Пошаговые подсказки для выполнения бытового действия. — AI объединяет историю, текущую ситуацию и обязательные условия, чтобы предложить следующий наиболее обоснованный шаг. К исходным данным относятся индивидуальные потребности, настройки доступности, контент и интерфейсы. Формат результата: несколько вариантов для «Пошаговые подсказки для выполнения бытового действия», ранжированных по полезности, ограничениям и причинам выбора. Надёжность оценивают по полезности для пользователя, соблюдению ограничений и качеству результата после принятия рекомендации; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
254Распознавание состояния пользователя и предложение безопасной помощи. — Для этой задачи система выделяет информативные признаки, сравнивает их с нормой и отмечает случаи, соответствующие искомому событию. Рабочие входы: настройки доступности, контент, интерфейсы и сенсорные сигналы. Формат результата: перечень объектов, событий или отклонений, относящихся к «Распознавание состояния пользователя и предложение безопасной помощи», с локализацией, уверенностью и признаками срабатывания. Критерии приёмки: по полноте обнаружения, доле ложных срабатываний и качеству локализации на независимой выборке; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
255Преобразование визуальной информации в тактильное или звуковое представление. — Практическая реализация: AI сначала определяет элементы, которые должны сохраниться, затем перестраивает форму представления и отмечает внесённые изменения. Предметная логика: работает одновременно со спектральной структурой, ритмом и временной динамикой сигнала. Входной контекст включает аудиодорожки, контент, интерфейсы, сенсорные сигналы и индивидуальные потребности. Формат результата: преобразованный материал по задаче «Преобразование визуальной информации в тактильное или звуковое представление» с сохранённым содержанием и журналом значимых изменений. Ошибки выявляют сравнением смысла и структуры до и после преобразования, а также поиском потерянных элементов; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров.
256Автоматическая проверка цифрового контента на доступность. — Механизм: AI выполняет набор автоматических проверок и сохраняет доказательства для каждого пройденного или нарушенного условия. Исходные данные: интерфейсы, сенсорные сигналы, индивидуальные потребности и настройки доступности. Формат результата: протокол выполнения «Автоматическая проверка цифрового контента на доступность» с пройденными условиями, найденными нарушениями и спорными местами для ручного решения. Проверка: повторным запуском на эталонных примерах, ручной проверкой спорных случаев и полнотой контрольного покрытия; с участием целевых пользователей, по стандартам доступности, понятности и снижению барьеров. <a id="section-ii-1"></a>

0 моделей