/ Профессии
Разработка ПО, данные, AI и инфраструктура

II.8Инженерия данных и аналитика

В разделе собраны самостоятельные задачи, где AI помогает готовить надёжные данные и превращать их в понятную аналитику. Для каждого пункта отдельно указаны механизм, входы, результат и способ проверки.

ЭмбеддингиТекст
AI-задач
22
в этой профессии
Подходящих моделей
23 488
по типу задач и модальности
Категория
II. Разработка и данные
Основные типы
ЭмбеддингиТекст

Рекомендованные модели

23 488 моделей
Загрузки
Лайки
Дата выхода
5 851–5 880 из 23 488
RAS-LAB
Qwen3-Coder-16B-A3B-KREAP-MLX

RAS-LAB выпустила экспериментальный чекпойнт Qwen3-Coder-16B-A3B-KREAP-MLX — сжатую методом K-REAP инструктивную MoE-модель для генерации текста, программирования и диалоговых сценариев. Она основана на Qwen/Qwen3-Coder-30B-A3B-Instruct; число маршрутизируемых экспертов сокращено со 128 до 64 на слой, а активный набор top-8 сохранён. В README указано около 16 млрд параметров и 3,3 млрд активных; метаданные каталога сообщают 2,6 млрд параметров. Модель поддерживает контекст до 262 144 токенов и доступна в формате safetensors для MLX и Transformers. Метод K-REAP защищает экспертов, важных для корейского языка, и снижает его деградацию относительно стандартного REAP, однако при сжатии на 50% часть защищённых экспертов пришлось удалить. По приведённым бенчмаркам заметно ухудшились показатели на корейских и английских задачах, математике и программировании. Это чекпойнт, демонстрирующий предел сжатия, а не рекомендуемый рабочий вариант. Лицензия — Apache-2.0.

1.0K0июль 2026ctx262.1K
textapache-2.0hugging-face
ryankim17920
qwen3p6-27b-expthink-step60

ryankim17920/qwen3p6-27b-expthink-step60 — текстовая дообученная модель на базе Qwen/Qwen3.6-27B, опубликованная как шаг 60 эксперимента ExpThink. Она предназначена для генерации ответов с рассуждением и сокращения числа токенов во внутреннем рассуждении. Модель содержит языковую часть Qwen3_5ForCausalLM, имеет 22,3 млрд параметров и контекст до 262 144 токенов; формат весов — Safetensors. Это только текстовая модель: зрительная часть базовой мультимодальной модели в репозитории отсутствует. В оценке на англоязычных задачах вопросов и ответов, математике и тестах с выбором ответа модель сократила число токенов рассуждения на 52,71% на IID и на 33,80% на OOD по сравнению с базовой моделью. В этих ограниченных тестах регрессии точности не наблюдалось, однако объём выборки и три случайных seed не позволяют считать улучшение точности статистически подтверждённым. Обучение продолжало предыдущий чекпойнт ещё на 10 шагов со сброшенными оптимизатором и планировщиком. Модель может применяться для ответов на проверяемые вопросы, математических задач и тестов на общие и научные знания, когда важно уменьшить длину рассуждений. Карточка не подтверждает качество для общего диалога, программирования, многоязычной работы, использования инструментов или безопасного поведения. Для запуска требуется актуальная версия Transformers с поддержкой текстовых моделей Qwen 3.5; Apache-2.0 унаследована от базовой модели.

340авг. 2026ctx262.1K
textapache-2.0hugging-face
Montalte
qwen4b-math-think-taskvector

Montalte/qwen4b-math-think-taskvector — экспериментальный артефакт слияния для переноса навыков между математикой и программированием. Он основан на плотной языковой модели Qwen3-4B-Base и использует полные веса специалиста по математическим рассуждениям как task vector. Модель предназначена для генерации текста в математических задачах и экспериментов с переносом навыков между математикой и кодом. Модель содержит 3,7 млрд параметров, принимает текст и поддерживает контекст до 32 768 токенов. В карточке не описаны поддерживаемые естественные языки и результаты оценки качества. Репозиторий содержит веса Safetensors; лицензия — Apache-2.0.

560сент. 2026ctx32.8K
textapache-2.0hugging-face
thebajajra
RexReranker-base

RexReranker Base — англоязычный нейронный реранкер товаров для электронной коммерции от автора thebajajra. Модель оценивает релевантность пары из поискового запроса и описания товара, выдавая вероятность от 0 до 1. Она основана на RexBERT-base и использует архитектуру ModernBERT с классификационной головой; размер — 149 млн параметров, максимальный контекст — 7 999 токенов. Модель предназначена для переклассификации результатов товарного поиска: она помогает поднимать выше товары, лучше соответствующие запросу. Работает как CrossEncoder в библиотеке Sentence Transformers; вход включает запрос, название и описание товара. Доступна в формате safetensors, лицензия — Apache-2.0. Карточка заявляет оценку релевантности, но не приводит сравнительных метрик или подробностей об ограничениях качества.

7394янв. 2026ctx8K
textapache-2.0hugging-face
thebajajra
RexReranker-mini

RexReranker Mini — англоязычный нейросетевой реранкер для электронной коммерции от автора thebajajra. Модель на базе энкодера ModernBERT RexBERT-mini содержит 68,1 млн параметров и дообучена предсказывать релевантность пары из поискового запроса и описания товара. Она выдаёт оценку вероятности от 0 до 1 и совместима с CrossEncoder из Sentence Transformers. Модель предназначена для переупорядочивания результатов поиска товаров в магазинах, маркетплейсах и каталогах. На вход подаются запрос и текст товара с названием и описанием; контекст составляет до 7 999 токенов. В метаданных также указана поддержка классификации текста. Лицензия Apache-2.0 разрешает использование на её условиях.

215янв. 2026ctx8K
textapache-2.0hugging-face
KoichiYasuoka
roberta-base-korean-ud-goeswith

KoichiYasuoka/roberta-base-korean-ud-goeswith — модель Koichi Yasuoka на архитектуре RoBERTa, дообученная на базе KoichiYasuoka/roberta-base-korean-hanja для разметки частей речи и синтаксического разбора зависимостей корейского текста. Для субслов используется метка goeswith. Модель подходит для лингвистического анализа предложений и построения синтаксических деревьев; в Hugging Face она отнесена к задаче классификации токенов. Модель содержит 143,4 млн параметров, работает с текстом и имеет контекстное окно до 514 токенов. В карточке указана лицензия CC BY-SA 4.0. Для использования через приведённый в README пример требуется Transformers с параметром trust_remote_code=True.

1880нояб. 2022ctx514
textcc-by-sa-4.0hugging-face
KoichiYasuoka
roberta-large-japanese-juman-ud-goeswith

Koichi Yasuoka разработал японскую модель RoBERTa-large для морфосинтаксического анализа текста. Она дообучена на базе nlp-waseda/roberta-large-japanese и предназначена для разметки частей речи и синтаксических зависимостей с обработкой субслов через отношение goeswith. В карточке Hugging Face указаны архитектура RobertaForTokenClassification, 435,4 млн параметров и контекст до 514 токенов. Модель принимает японский текст и возвращает токеновую разметку; для запуска через Transformers требуется библиотека fugashi. Репозиторий содержит веса PyTorch, лицензия — CC BY-SA 4.0.

1470февр. 2023ctx514
textcc-by-sa-4.0hugging-face
KoichiYasuoka
roberta-small-japanese-aozora-char

RoBERTa-small-japanese-aozora-char — компактная модель Koichi Yasuoka на архитектуре RoBERTa, предварительно обученная на текстах японской библиотеки 青空文庫 с посимвольным токенизатором. Она предназначена для заполнения пропусков в тексте и может служить основой для дообучения под задачи обработки японского языка, включая разметку частей речи и синтаксический анализ зависимостей. Модель содержит 12,6 млн параметров, принимает текстовые последовательности с контекстом до 128 токенов и выдаёт предсказания для замаскированных позиций. Доступны веса PyTorch; лицензия — CC BY-SA 4.0.

2051март 2022ctx128
textcc-by-sa-4.0hugging-face
timm
sam2_hiera_large.fb_r1024

Это веса визуального энкодера HieraDet Large из семейства SAM 2, опубликованные timm. Модель извлекает признаки из изображений и предназначена для использования как компонент компьютерного зрения в системах, которым нужны визуальные представления для последующей обработки. Модель предоставлена в форматах PyTorch и safetensors, а библиотека для работы с ней — timm. Лицензия — Apache-2.0. Карточка указывает на вариант с разрешением 1024; модель описана как энкодер изображений без остальной части SAM 2.

1.4K1дек. 2024
imageembeddingapache-2.0hugging-face
EColi
SB_Classifier

EColi/SB_Classifier — модель классификации текста, опубликованная пользователем EColi на Hugging Face. Она предназначена для анализа текстовых фрагментов, связанных с категориями SponsorBlock: INTERACTION, NONE, SELFPROMO и SPONSOR. Такие категории позволяют выявлять в содержании видео рекламные интеграции, саморекламу, призывы к взаимодействию и обычные фрагменты без соответствующего содержания. На странице модели указаны PyTorch и тег bert, однако точная архитектура, число параметров, данные обучения, поддерживаемые языки, размер контекста и показатели качества не опубликованы. Модель относится к задаче Text Classification и, вероятно, рассчитана на использование в системах автоматического анализа сегментов видеоконтента, но подробные сценарии применения разработчиком не описаны. Сильной стороной является наличие специализированных классов для задач SponsorBlock. Ограничения связаны с отсутствием содержательной model card, документации по качеству и сведениям о языках и границах применимости; поэтому надежность классификации для иных доменов или языков установить нельзя. Лицензия на странице модели не указана.

4121апр. 2022ctx512
texthugging-face
peldrak
segformer-b5-ade-finetuned-coastTrain

Модель peldrak/segformer-b5-ade-finetuned-coastTrain — версия SegFormer B5, дообученная автором peldrak на наборе данных peldrak/coastTrain поверх nvidia/segformer-b5-finetuned-ade-640-640. Она предназначена для семантической сегментации прибрежных сцен: присваивает пиксели классам «вода», «белая пена волн», «осадок», «прочий природный рельеф», «растительность», «застройка» и «неизвестное». На оценочном наборе указаны mean IoU 0,7737 и общая точность 0,9252; IoU для белой пены волн ниже, чем для воды и осадка. Модель распространяется в формате safetensors; лицензия в метаданных обозначена как other.

160март 2024
imageotherhugging-face
VINAY-UMRETHE
SigMamba-V1-Large

SigMamba-V1-Large — модель для выявления аномалий в видео наблюдения, разработанная автором репозитория VINAY-UMRETHE. Архитектура объединяет визуальный энкодер SigLIP 2 и Mamba — модель пространства состояний с линейной сложностью по длине последовательности. Модель классифицирует видео и выдаёт оценки аномальности; README описывает обработку как последовательности кадров и рекомендует использовать 32 кадра. Модель принимает кадры размером 384 × 384 пикселя для извлечения признаков внутри модели либо готовые векторы признаков размерности 1024, а на выходе формирует оценки для классификации и порогового обнаружения аномалий. В README приведены результаты на бенчмарке: AUC-ROC 89,82% и Average Precision 41,05% для версии Large. Весы опубликованы в формате safetensors; лицензия — MIT. Модель предназначена для анализа видеонаблюдения и исследовательских или прикладных сценариев обнаружения необычных событий. Качество зависит от домена и данных; README не приводит сведения о проверке на других наборах, конкретном пороге принятия решения или поддержке потоковой обработки.

506янв. 2026
videomithugging-face
cybert79
spamai

cybert79/spamai — модель классификации текста для выявления спама в электронных письмах и сообщениях. По карточке, её разработали исследователи в области ИИ и кибербезопасности, дообучив bert-base-uncased на наборах SetFit/enron_spam и Deysi/spam-detection-dataset. Модель использует архитектуру BERT для классификации последовательностей, содержит 136,7 млн параметров и принимает текст длиной до 512 токенов. Карточка указывает английский язык и сообщает о точности 99,55% и оценочной функции потерь 0,0448 на тестовом разделении использованных наборов данных. Модель подходит для фильтрации спама в почте и текстовых сообщениях. Она не предназначена для выявления фишинга, вредоносных вложений или других угроз за пределами текстового спама; качество может снижаться на языках, отличных от английского, и на данных, не похожих на обучающие. Лицензия указана как неизвестная.

4325февр. 2024ctx512
textunknownhugging-face
domenicrosati
SPECTER-finetuned-DAGPap22

SPECTER-finetuned-DAGPap22 — модель классификации текста на основе BERT, полученная дообучением allenai/specter. Она предназначена для классификации текстовых последовательностей; README сообщает о результатах на тестовом наборе: accuracy 0,9993 и F1 0,9995, однако датасет и условия оценки не раскрыты. Модель содержит 137,1 млн параметров и обрабатывает контекст длиной до 512 токенов. Модель опубликована в формате PyTorch под лицензией Apache-2.0. Карточка не уточняет целевые классы, языки, обучающие данные и сценарии применения, поэтому приведённые метрики нельзя считать гарантией качества на других данных.

150июль 2022ctx512
textapache-2.0hugging-face
fluxions
stftvae

STFT-VAE — нейронный аудиокодек с непрерывным латентным представлением на основе STFT. Модель кодирует аудио в комплексную спектрограмму, Transformer-энкодер сжимает её до непрерывного латента с частотой 3,125 кадра в секунду и размерностью 128, а Transformer-декодер и обратное STFT восстанавливают звуковую волну. Фаза сохраняется через STFT/ISTFT, без обучаемого вокодера. Модель содержит около 116 млн параметров и рассчитана на аудио с частотой дискретизации 24 кГц. Она предназначена для кодирования и реконструкции аудио, например для сжатия звукового сигнала в латентное представление и последующего восстановления. Репозиторий содержит архитектурную конфигурацию и веса в формате safetensors; лицензия — MIT.

180июль 2026
audiomithugging-face
wujunjiehhs
strixAE

strixAE — аудиоязыковая модель, созданная автором репозитория на основе Audio-Reasoner: к базовой модели применили GRPO-постобучение и объединили обученные веса в отдельный чекпойнт. Она использует архитектуру Qwen2AudioForConditionalGeneration и содержит 8,40 млрд параметров. Модель принимает аудио и формирует текстовые ответы для анализа речи, музыки и окружающих звуков, рассуждений об аудио и ответов на вопросы. Модель предназначена для оценки качества и искажений аудио, выбора операций восстановления и определения порядка их применения. Для каждой предложенной операции она может дать решение APPLY или SKIP с обоснованием и предложить последовательность обработки. Лицензия — MIT. Карточка описывает чекпойнт как исследовательский; независимые результаты его оценки не опубликованы.

371сент. 2026
textaudiomithugging-face
tanaos
tanaos-spam-detection-spanish

Модель tanaos/tanaos-spam-detection-spanish разработана Tanaos с использованием библиотеки Artifex. Это компактный классификатор текста на базе DistilBERT, дообученный на синтетических испаноязычных примерах и распределяющий сообщения по классам spam и not_spam. Архитектура — DistilBertForSequenceClassification; модель принимает текст, поддерживает контекст до 512 токенов и сохраняется в формате safetensors. Модель предназначена для первичной фильтрации спама в электронной почте, мессенджерах и других текстовых каналах. К спаму карточка относит нежелательную рекламу и пропаганду, мошенничество, фишинг, вводящий в заблуждение контент, вредоносные ссылки, материалы для взрослых и сообщения с чрезмерной капитализацией или пунктуацией. Лицензия — MIT. Модель специализирована на испанском языке и обучена на синтетическом наборе данных, поэтому качество на реальных сообщениях и на других языках может отличаться. Авторы не рекомендуют применять её в критически важных сценариях без дополнительной проверки человеком.

331февр. 2026ctx512
textmithugging-face
timm
tf_mixnet_s.in1k

timm/tf_mixnet_s.in1k — модель семейства MixNet для классификации изображений и извлечения визуальных признаков. Её обучили авторы статьи на ImageNet-1k в TensorFlow, а Ross Wightman перенёс веса в PyTorch; репозиторий предоставляет модель через библиотеку timm. В модели около 4,1 млн параметров, вычислительная сложность составляет 0,3 GMACs, размер входного изображения — 224 × 224 пикселя. Модель подходит для классификации изображений по категориям ImageNet-1k, извлечения карт признаков и получения эмбеддингов изображений. Архитектура MixNet использует смешанные глубинные свёрточные ядра. Лицензия репозитория — Apache-2.0. Карточка не приводит сведений о точности на других наборах данных или поддержке иных размеров входа; результаты вне описанного сценария могут отличаться.

2070дек. 2022
imageapache-2.0hugging-face
kktoto
tiny_focal_v2_label

kktoto/tiny_focal_v2_label — модель токенной классификации на базе BERT, обученная разработчиком с нуля на неизвестном наборе данных. Она предназначена для присвоения меток отдельным токенам текста; конкретный тип разметки и целевая область применения не описаны. Модель содержит 12,6 млн параметров, использует PyTorch и принимает последовательности длиной до 512 токенов. В README приведены результаты оценки: F1 0,6861, точность 0,9513, полнота 0,6747 и loss 0,0558. Эти показатели относятся к неописанной тестовой выборке, поэтому по ним нельзя судить о качестве на других данных. Лицензия в доступных сведениях не указана.

150июнь 2022ctx512
texthugging-face
Datadog
Toto-2.0-2.5B-FT

Toto-2.0-2.5B-FT — модель Datadog для прогнозирования временных рядов, полученная дообучением базовой Toto-2.0-2.5B. Это чекпойнт архитектуры Toto 2.0 с 2,8 млрд параметров, опубликованный в формате Safetensors и рассчитанный на работу через PyTorch. Дообучение проводилось 10 000 шагов на смеси данных, включающей обучающую выборку GIFT-Eval и метрики наблюдаемости Datadog с шагом 5 минут и более. Модель предназначена для воспроизводимости результата бенчмарка GIFT-Eval и исследования влияния дообучения на этом наборе данных. В README указано, что чекпойнт занял второе место по рангам CRPS и MASE на полном лидерборде; эти результаты относятся к бенчмарку и не характеризуют качество на произвольных производственных сценариях. Разработчики рекомендуют для реальных нагрузок базовые модели Toto 2.0. Модель распространяется по лицензии Apache-2.0. Она принимает временные ряды и выдаёт прогнозы; README не сообщает длину контекста. Включение обучающей выборки GIFT-Eval в данные дообучения ограничивает независимую оценку на этом бенчмарке и обобщение за его пределы.

1002май 2026
textapache-2.0hugging-face
tihon-nth
ts-g-4-fc-loss-8-10-epochs-5_class_1_p3_splited-1788934746.2713165

Это дообученная модель классификации видео на базе facebook/timesformer-base-finetuned-k400, опубликованная пользователем tihon-nth. Архитектура TimeSformer предназначена для анализа видеокадров и распознавания категорий действий. Модель содержит 113,2 млн параметров и распространяется в формате safetensors. В README указаны результаты оценки на наборе неизвестного происхождения: accuracy 0,9367 и loss 0,0396. Назначение меток классов, состав обучающих данных и подробные сценарии применения не описаны, поэтому применимость результата за пределами оценочного набора неясна. Лицензия — CC BY-NC 4.0, допускающая использование с указанием авторства и ограничивающая коммерческое применение.

810сент. 2026
videocc-by-nc-4.0hugging-face
cardiffnlp
twitter-roberta-large-emoji-latest

cardiffnlp/twitter-roberta-large-emoji-latest — модель Cardiff NLP на архитектуре RoBERTa-large с 454,1 млн параметров. Она обучена на 154 млн твитов, опубликованных до конца декабря 2022 года, и дообучена на наборе TweetEmoji100 из SuperTweetEval для многоклассовой классификации по 100 эмодзи. Модель предназначена для определения подходящего эмодзи по тексту твита и других коротких сообщений на английском языке. Она принимает текст и выдаёт метку класса эмодзи; длина контекста — 514 токенов. Модель распространяется в формате safetensors по лицензии MIT.

165нояб. 2023ctx514
textmithugging-face
jarjoura
video-depth-anything-large-metric-mlx

Video Depth Anything Large (Metric) в формате MLX — конверсия модели depth-anything/Metric-Video-Depth-Anything-Large от ByteDance, представленной как highlight на CVPR 2025. Модель оценивает глубину по монокулярному видео: использует backbone DINOv2 и временную голову DPT, выдавая абсолютные расстояния в метрах с согласованностью между кадрами. Модель предназначена для извлечения метрической карты глубины из видеопоследовательности. Конверсия проверена сравнением с реализацией PyTorch: README сообщает максимальную относительную ошибку около 1e-5 на CPU и около 1% на GPU при fast-math в Metal. Распространяется по лицензии Apache-2.0.

180авг. 2026
imageapache-2.0hugging-face
mlx-community
Video-Depth-Anything-Small-MLX

Video Depth Anything Small (MLX) — порт для MLX модели Video Depth Anything от ByteDance, представленный сообществом mlx-community. Модель оценивает относительную глубину по кадрам видео и предназначена для согласованных во времени карт глубины на видео произвольной длины. В основе — backbone DINOv2, голова DPT и временные модули движения в стиле AnimateDiff; выходом служат карты глубины для каждого кадра, а не текст. Модель принимает видео как последовательности RGB-кадров; высота и ширина должны быть кратны 14. Это не метрическая модель: она не выдаёт абсолютную глубину в метрах. Веса представлены в формате safetensors и точности fp32; README сообщает о близком совпадении с PyTorch-реализацией при запуске на GPU и CPU. Лицензия CC BY-NC 4.0 запрещает коммерческое использование.

380сент. 2026
imagecc-by-nc-4.0hugging-face
dronefreak
visdrone-yolov9t

YOLOv9t — детектор объектов на основе YOLOv9, дообученный на наборе VisDrone-DET в рамках DetectionBench. Модель предназначена для обнаружения объектов на аэроснимках и кадрах с дронов; она распознаёт пешеходов, людей, велосипеды, автомобили, фургоны, грузовики, трициклы, автобусы, мотоциклы и другие классы VisDrone-DET. На тестовой выборке VisDrone-DET модель показала mAP@50 40,67% и mAP@50–95 23,73%. Она работает с изображениями и выдаёт рамки объектов с классами. Обучение на данных с большим количеством мелких объектов делает её подходящей для анализа сцен, снятых с высоты, но качество ограничивают сильный дисбаланс классов и редкость некоторых категорий. Весы опубликованы в формате PyTorch для библиотеки Ultralytics. Лицензия репозитория — AGPL-3.0; README также указывает, что лицензия исходного датасета VisDrone ограничивает некоммерческое исследовательское использование моделей, обученных на нём.

1374июль 2026
imageagpl-3.0hugging-face
tiantiaf
voxlect-english-dialect-whisper-small

Модель разработана Tiantian Feng для классификации диалектов английской речи и представлена как реализация метода из работы Voxlect: A Speech Foundation Model Benchmark for Modeling Dialect and Regional Languages Around the Globe. Она принимает аудио и относит речь к одной из 16 категорий, включая North America, Scottish, Irish, South Asia и Oceania, а также более широкие языковые группы и категории English и Other. Модель дообучена на базе openai/whisper-small; в обучении использованы дополнительные речевые данные TIMIT и ParaSpeechCaps. Репозиторий содержит веса в формате safetensors, а модель рассчитана на классификацию аудио с английской речью. Лицензия OpenRAIL запрещает коммерческое использование; авторы также исключают клиническое применение, наблюдение и вторжение в частную жизнь. При работе с речевыми данными следует учитывать согласие говорящих и применимые законы.

1072авг. 2025
audioopenrailhugging-face
lewtun
wav2vec2-base-100k-voxpopuli-finetuned-gtzan

lewtun/wav2vec2-base-100k-voxpopuli-finetuned-gtzan — модель классификации аудио, созданная дообучением facebook/wav2vec2-base-100k-voxpopuli для набора GTZAN. Она использует архитектуру Wav2Vec2ForSequenceClassification и содержит 113,3 млн параметров. На указанном в карточке наборе оценки достигла точности 0,86 при значении функции потерь 0,9408. Модель предназначена для определения класса аудиозаписи. Карточка не описывает набор классов, языки, условия записи или ограничения по длительности входного аудио. Лицензия CC BY-NC 4.0 разрешает использование с указанием авторства, но не коммерческое использование.

340март 2022
textcc-by-nc-4.0hugging-face
GetmanY1
wav2vec2-base-sami-22k

Sámi Wav2Vec2 Base — акустическая модель семейства Wav2Vec2, разработанная Ярославом Гетманом и Тамашем Гросом. Модель содержит 113,3 млн параметров и предварительно обучена на 22,4 тыс. часов неразмеченной саамской речи из архива Yle Sámi Radio. Для работы входное аудио должно иметь частоту дискретизации 16 кГц. Модель служит основой для распознавания саамской речи и распознавания эмоций в речи. Она обучена только на аудио и не содержит токенизатора, поэтому для получения текста её нужно дополнить токенизатором и дообучить на размеченных аудиоданных. Распространяется по лицензии Apache-2.0. Обучающие аудиофрагменты ограничены длительностью до 30 секунд; модель, вероятно, лучше подходит для коротких записей. Данные радиоархива могут создавать смещение в сторону голосов ведущих, а остаточные музыкальные и другие неречевые события могут затруднить дообучение на чистой речи.

230сент. 2024
textaudioapache-2.0hugging-face
junnyu
wobert_chinese_plus_base

junnyu/wobert_chinese_plus_base — китайская языковая модель семейства WoBERT, разработанная Junnyu. Это плотная BERT-модель с архитектурой BertForMaskedLM, предназначенная для заполнения пропусков в тексте: модель предсказывает замаскированные токены по окружающему контексту. Она содержит 151,6 млн параметров и обрабатывает последовательности длиной до 512 токенов. Модель ориентирована на китайский язык; в репозитории доступны веса в форматах PyTorch и Flax. README указывает на использование WoBertTokenizer. Модель подходит для восстановления пропущенных фрагментов китайского текста и как базовый компонент задач, опирающихся на предсказание замаскированных токенов. Карточка не сообщает конкретные результаты оценки качества или условия лицензии, поэтому их нельзя подтвердить по доступным данным.

545март 2022ctx512
texthugging-face
cartesinus
xlm-r-base-amazon-massive-intent

Модель cartesinus/xlm-r-base-amazon-massive-intent — дообученная cartesinus модель на базе XLM-RoBERTa Base от FacebookAI для классификации намерений в коротких пользовательских запросах. Она обучена на англоязычной части набора AmazonScience/MASSIVE и предназначена для определения намерения пользователя в сценариях голосовых помощников и NLU. Модель использует архитектуру XLM-RoBERTa для классификации последовательностей, содержит 305,2 млн параметров и принимает текст с контекстом до 514 токенов. В README указаны точность и F1 0,8775 на оценочном наборе; результаты заметно различаются по доменам, поэтому качество зависит от категории запросов. Поддерживается классификация текста на английском языке. Лицензия — MIT. Карточка не описывает ограничения применения и не приводит сведения о метках классов или инструкции по использованию.

728сент. 2022ctx514
textmithugging-face

Задачи профессии

22 задачи
400Профилирование нового набора данных. — Механизм: AI сопоставляет наблюдаемое состояние с эталонами, нормативами или историческими аналогами и оценивает степень соответствия. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. Исходные данные: таблицы и события, схемы и определения бизнес-метрик. Формат результата: оценка по задаче «Профилирование нового набора данных» в числовой или категориальной форме с расшифровкой факторов, допущений и неопределённости. Проверка: сверкой с экспертными оценками или фактическими исходами, а также анализом чувствительности к входным данным; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
401Определение вероятного смысла и типа столбцов. — AI сопоставляет наблюдаемые признаки с критериями и устанавливает требуемое значение, состояние или вариант. К исходным данным относятся таблицы, события, файлы и схемы. Формат результата: установленное значение или вариант по задаче «Определение вероятного смысла и типа столбцов» с оценкой уверенности и основаниями решения. Надёжность оценивают по точности относительно эталона, калибровке уверенности и разбору случаев, где источники расходятся; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
402Обнаружение пропусков, выбросов и невозможных значений. — Для этой задачи система анализирует поток наблюдений и локализует признаки, которые отличают целевой объект или нарушение от обычного состояния. Рабочие входы: события, файлы, схемы и каталоги данных. Формат результата: перечень объектов, событий или отклонений, относящихся к «Обнаружение пропусков, выбросов и невозможных значений», с локализацией, уверенностью и признаками срабатывания. Критерии приёмки: по полноте обнаружения, доле ложных срабатываний и качеству локализации на независимой выборке; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
403Выбор стратегии заполнения пропущенных данных. — Практическая реализация: AI объединяет историю, текущую ситуацию и обязательные условия, чтобы предложить следующий наиболее обоснованный шаг. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. Входной контекст включает таблицы и события, схемы и определения бизнес-метрик. Формат результата: несколько вариантов для «Выбор стратегии заполнения пропущенных данных», ранжированных по полезности, ограничениям и причинам выбора. Ошибки выявляют по полезности для пользователя, соблюдению ограничений и качеству результата после принятия рекомендации; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
404Очистка и стандартизация категориальных значений. — Механизм: AI преобразует исходный материал по заданным правилам, сохраняя смысл, структуру и критически важные детали. Исходные данные: схемы, каталоги данных, SQL и бизнес-метрики. Формат результата: преобразованный материал по задаче «Очистка и стандартизация категориальных значений» с сохранённым содержанием и журналом значимых изменений. Проверка: сравнением смысла и структуры до и после преобразования, а также поиском потерянных элементов; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
405Сопоставление и объединение данных из разных источников. — AI строит единое пространство признаков и устанавливает соответствия между элементами, которые описаны по-разному. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. К исходным данным относятся таблицы и события, схемы и определения бизнес-метрик. Формат результата: карта соответствий и различий для «Сопоставление и объединение данных из разных источников», где элементы приведены к единым критериям и связаны с первичными данными. Надёжность оценивают экспертной сверкой соответствий и проверкой, что различия не вызваны несовместимыми форматами; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
406Автоматическое построение ETL/ELT-конвейера. — Для этой задачи система объединяет уравнения, эмпирические данные и обученные зависимости в модель, пригодную для анализа чувствительности. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. Рабочие входы: таблицы и события, схемы и определения бизнес-метрик. Формат результата: вычислительная модель или карта для «Автоматическое построение ETL/ELT-конвейера» с результатами сценариев и анализом чувствительности. Критерии приёмки: сопоставлением с наблюдениями, тестами чувствительности и воспроизводимостью вычислений; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
407Генерация преобразований данных по словесному описанию. — Практическая реализация: AI создаёт новый артефакт по требованиям, исходным фактам и примерам, сохраняя возможность последующего редактирования. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. Входной контекст включает таблицы и события, схемы и определения бизнес-метрик. Формат результата: редактируемый артефакт по задаче «Генерация преобразований данных по словесному описанию», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — аналитический набор или запрос. Ошибки выявляют по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
408Проверка качества данных по автоматически предложенным правилам. — Механизм: AI сверяет объект с эталоном, правилами и взаимными зависимостями, отмечая пропуски, конфликты и нарушения. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. Исходные данные: таблицы и события, схемы и определения бизнес-метрик. Формат результата: протокол выполнения «Проверка качества данных по автоматически предложенным правилам» с пройденными условиями, найденными нарушениями и спорными местами для ручного решения. Проверка: повторным запуском на эталонных примерах, ручной проверкой спорных случаев и полнотой контрольного покрытия; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
409Обнаружение нарушения контрактов данных. — AI сочетает обученные шаблоны с контрольными правилами, чтобы находить значимые случаи и не пропускать пограничные примеры. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. К исходным данным относятся таблицы и события, схемы и определения бизнес-метрик. Формат результата: перечень объектов, событий или отклонений, относящихся к «Обнаружение нарушения контрактов данных», с локализацией, уверенностью и признаками срабатывания. Надёжность оценивают по полноте обнаружения, доле ложных срабатываний и качеству локализации на независимой выборке; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
410Анализ происхождения показателя и цепочки преобразований. — Для этой задачи система разбирает данные по существенным признакам, выявляет связи и формирует выводы с привязкой к исходным свидетельствам. Рабочие входы: файлы, схемы, каталоги данных и SQL. Формат результата: объяснимые выводы по задаче «Анализ происхождения показателя и цепочки преобразований» с влияющими факторами, альтернативными трактовками и ссылками на данные. Критерии приёмки: воспроизводимостью расчётов, проверкой источников и сравнением выводов с альтернативными объяснениями; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
411Генерация SQL по вопросу на естественном языке. — Практическая реализация: AI собирает содержание и структуру из заданных ограничений, затем формирует несколько вариантов для выбора и доработки. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. Входной контекст включает таблицы и события, схемы и определения бизнес-метрик. Формат результата: редактируемый артефакт по задаче «Генерация SQL по вопросу на естественном языке», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — аналитический набор или запрос. Ошибки выявляют по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
412Объяснение SQL-запроса и поиск логических ошибок. — Механизм: AI агрегирует разрозненные сигналы в целостную картину и показывает, какие данные поддерживают каждый вывод. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. Исходные данные: таблицы и события, схемы и определения бизнес-метрик. Формат результата: объяснимые выводы по задаче «Объяснение SQL-запроса и поиск логических ошибок» с влияющими факторами, альтернативными трактовками и ссылками на данные. Проверка: воспроизводимостью расчётов, проверкой источников и сравнением выводов с альтернативными объяснениями; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
413Автоматическое построение подходящей визуализации. — AI создаёт вычислительное представление объекта или процесса и проигрывает на нём альтернативные сценарии. К исходным данным относятся SQL, бизнес-метрики, таблицы и события. Формат результата: вычислительная модель или карта для «Автоматическое построение подходящей визуализации» с результатами сценариев и анализом чувствительности. Надёжность оценивают сопоставлением с наблюдениями, тестами чувствительности и воспроизводимостью вычислений; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
414Создание смыслового слоя метрик. — Для этой задачи система собирает содержание и структуру из заданных ограничений, затем формирует несколько вариантов для выбора и доработки. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. Рабочие входы: таблицы и события, схемы и определения бизнес-метрик. Формат результата: редактируемый артефакт по задаче «Создание смыслового слоя метрик», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — аналитический набор или запрос. Критерии приёмки: по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
415Объяснение изменения показателя через декомпозицию факторов. — Практическая реализация: AI агрегирует разрозненные сигналы в целостную картину и показывает, какие данные поддерживают каждый вывод. Входной контекст включает таблицы, события, файлы и схемы. Формат результата: объяснимые выводы по задаче «Объяснение изменения показателя через декомпозицию факторов» с влияющими факторами, альтернативными трактовками и ссылками на данные. Ошибки выявляют воспроизводимостью расчётов, проверкой источников и сравнением выводов с альтернативными объяснениями; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
416Когортный анализ. — Механизм: AI разбирает данные по существенным признакам, выявляет связи и формирует выводы с привязкой к исходным свидетельствам. Исходные данные: события, файлы, схемы и каталоги данных. Формат результата: объяснимые выводы по задаче «Когортный анализ» с влияющими факторами, альтернативными трактовками и ссылками на данные. Проверка: воспроизводимостью расчётов, проверкой источников и сравнением выводов с альтернативными объяснениями; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
417Анализ воронки и точек потери. — AI сопоставляет наблюдения, отделяет устойчивые закономерности от случайных совпадений и объясняет влияющие факторы. К исходным данным относятся файлы, схемы, каталоги данных и SQL. Формат результата: объяснимые выводы по задаче «Анализ воронки и точек потери» с влияющими факторами, альтернативными трактовками и ссылками на данные. Надёжность оценивают воспроизводимостью расчётов, проверкой источников и сравнением выводов с альтернативными объяснениями; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
418Сегментация объектов по поведению. — Для этой задачи система строит границы между категориями и ранжирует объекты так, чтобы наиболее важные или срочные обрабатывались раньше. Рабочие входы: схемы, каталоги данных, SQL и бизнес-метрики. Формат результата: результат «Сегментация объектов по поведению» в виде метки, класса, ранга или тематического слоя с уверенностью и объясняющими признаками. Критерии приёмки: по матрице ошибок, калибровке уверенности и отдельному анализу пограничных классов; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
419Поиск статистически значимых зависимостей. — Практическая реализация: AI индексирует доступные материалы, понимает смысл запроса и ранжирует кандидатов по содержательному совпадению. Входной контекст включает каталоги данных, SQL, бизнес-метрики и таблицы. Формат результата: ранжированный список кандидатов по задаче «Поиск статистически значимых зависимостей» со ссылками на источники, оценкой соответствия и фрагментами подтверждения. Ошибки выявляют по релевантности, полноте, отсутствию недопустимых источников и точности ссылок на подтверждение; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
420Подготовка аналитического отчёта с выводами и оговорками. — Механизм: AI собирает содержание и структуру из заданных ограничений, затем формирует несколько вариантов для выбора и доработки. Исходные данные: SQL, бизнес-метрики, таблицы и события. Формат результата: редактируемый артефакт по задаче «Подготовка аналитического отчёта с выводами и оговорками», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — аналитический набор или запрос. Проверка: по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
421Естественно-языковой интерфейс к BI-системе. — AI обходит разрешённые источники, объединяет найденное и отсеивает нерелевантные либо дублирующиеся результаты. К исходным данным относятся бизнес-метрики, таблицы, события и файлы. Формат результата: ранжированный список кандидатов по задаче «Естественно-языковой интерфейс к BI-системе» со ссылками на источники, оценкой соответствия и фрагментами подтверждения. Надёжность оценивают по релевантности, полноте, отсутствию недопустимых источников и точности ссылок на подтверждение; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик. <a id="section-ii-9"></a>

0 моделей