/ Профессии
Разработка ПО, данные, AI и инфраструктура

II.8Инженерия данных и аналитика

В разделе собраны самостоятельные задачи, где AI помогает готовить надёжные данные и превращать их в понятную аналитику. Для каждого пункта отдельно указаны механизм, входы, результат и способ проверки.

ЭмбеддингиТекст
AI-задач
22
в этой профессии
Подходящих моделей
23 488
по типу задач и модальности
Категория
II. Разработка и данные
Основные типы
ЭмбеддингиТекст

Рекомендованные модели

23 488 моделей
Загрузки
Лайки
Дата выхода
2 401–2 430 из 23 488
theuerc
TinyLlama-1.1B-Chat-Math-v1.0

theuerc/TinyLlama-1.1B-Chat-Math-v1.0 — дообученная языковая модель на архитектуре Llama, созданная Coulton Theuer, Bret Ellenbogen и Victoria Chang на основе TinyLlama-1.1B. Модель предназначена для генерации решений задач базовой алгебры, в частности систем линейных уравнений. Её обучили на 8 тысячах синтетических решений, созданных OpenMath-Mistral-7B-v0.1-hf на наборе ALG-514, с помощью SFTTrainer. Модель содержит около 1 млрд параметров, принимает текст и генерирует текст; карточка указывает поддержку английского языка и контекст до 2048 токенов. В примере предусмотрен сценарий с исполнением кода, однако сам генератор кода в карточке представлен как часть внешнего конвейера инференса. Zero-shot качество авторы оценивают как слабое, хотя отмечают пригодность модели для быстрого создания синтетических данных. Лицензия — Apache-2.0.

290апр. 2024ctx2K
textapache-2.0hugging-face
g-astruc
UniverSat

UniverSat — разработанная авторами репозитория универсальная модель-энкодер для дистанционного зондирования Земли на основе Vision Transformer. Она преобразует спутниковые и аэроснимки в пространственные эмбеддинги и рассчитана на классификацию, семантическую сегментацию и обнаружение изменений с помощью замороженного экстрактора признаков или дообучения. Модель принимает сочетания оптических, радиолокационных SAR, гиперспектральных и высотных данных, в том числе временные ряды, с разными разрешениями и числом каналов; входные данные нужно нормализовать по каналам с помощью z-score. Универсальный Patch Encoder отображает патчи разной пространственной, спектральной и временной формы в общее пространство признаков. Выходную детализацию пространственной карты можно выбирать при инференсе, вплоть до признаков на каждый пиксель. Модель предварительно обучена без учителя на 13 сенсорах из 7 наборов данных с маскированным мультимодальным моделированием и межмодальным контрастивным обучением; заявлено обобщение на сенсоры, не встречавшиеся при обучении. UniverSat предназначена для извлечения признаков в задачах анализа спутниковых и аэроснимков, включая сценарии с малым количеством размеченных данных. В однородных сценариях специализированные модели могут быть точнее или эффективнее; перенос на незнакомые неоптические сенсоры менее надёжен, чем на оптические. Репозиторий распространяется по лицензии MIT.

61121июнь 2026
imageembeddingmithugging-face
timm
vit_base_patch32_224.orig_in21k

Это модель Vision Transformer (ViT), первоначально обученная авторами статьи на ImageNet-21k в JAX и перенесённая в PyTorch Россом Уайтманом. Она предназначена для извлечения признаков изображений и использования в качестве основы для последующего дообучения; классификационная голова отсутствует. Модель содержит около 87,5 млн параметров, обрабатывает изображения размером 224 × 224 пикселя и имеет архитектуру с патчами 32 × 32. Её можно применять для получения эмбеддингов изображений и построения собственных классификаторов или других задач компьютерного зрения. Доступны веса PyTorch и Safetensors, лицензия — Apache-2.0. Ограничение: для готовой классификации потребуется добавить классификационную голову и при необходимости дообучить модель.

870нояб. 2023
imageembeddingapache-2.0hugging-face
Aliados
voice-gender-classifier

Карточка модели Aliados/voice-gender-classifier на Hugging Face совпадает с карточкой JaesungHuh/voice-gender-classifier, поэтому описание составлено по ней. JaesungHuh разработал классификатор пола по человеческому голосу. Модель принимает аудио и относит голос к категориям пола; для запуска доступны предварительно обученные веса и демонстрация на Hugging Face. В метаданных указаны задача audio-classification, формат safetensors и обучающий датасет VoxCeleb. Модель подходит для автоматической классификации голосовых записей в приложениях и исследовательских прототипах. Она выпущена по лицензии MIT. Представленность VoxCeleb может не соответствовать населению мира, поэтому предсказания могут быть смещены для отдельных групп и условий записи.

720авг. 2026
audiomithugging-face
facebook
wav2vec2-conformer-rope-large

facebook/wav2vec2-conformer-rope-large — акустическая модель семейства Wav2Vec2-Conformer, разработанная авторами Changhan Wang, Yun Tang, Xutai Ma, Anne Wu, Sravya Popuri, Dmytro Okhonko и Juan Pino. Модель содержит 402,7 млн параметров и предварительно обучена на 960 часах аудио LibriSpeech с частотой дискретизации 16 кГц; в архитектуре используются rotary position embeddings. Модель предназначена для извлечения акустических представлений речи и может служить основой для систем распознавания речи после добавления токенизатора и дообучения на размеченных текстовых данных. Она принимает аудио с частотой 16 кГц и не выдаёт готовую транскрипцию без такой дополнительной настройки. В карточке указан английский язык и набор данных LibriSpeech ASR. Весы опубликованы в формате PyTorch по лицензии Apache-2.0. Ключевое ограничение — это предобученная на аудио модель без токенизатора, поэтому для распознавания речи требуется отдельная настройка на размеченных данных.

412апр. 2022
textapache-2.0hugging-face
jalaluddin94
xlmr-nli-indoindo

jalaluddin94/xlmr-nli-indoindo — модель классификации текста на базе XLM-RoBERTa Base, дообученная разработчиком jalaluddin94 на неизвестном наборе данных. Она содержит 305,2 млн параметров, использует архитектуру XLM-RoBERTa для классификации последовательностей и принимает текст длиной до 514 токенов. Модель предназначена для классификации текстовых последовательностей. В README приведены результаты оценки: accuracy и precision 0,7701, recall 0,7701, F1 0,7693 и loss 0,6699. Название предполагает связь с NLI для индонезийского языка, но карточка не описывает метки классов, набор данных и целевые языки, поэтому это назначение нельзя подтвердить. Модель опубликована в формате PyTorch под лицензией MIT. Качество и применимость за пределами указанной оценки не установлены; назначение набора меток и языковая область требуют проверки перед использованием.

90июль 2023ctx514
textmithugging-face
mwalmsley
zoobot-encoder-efficientnet_b0

zoobot-encoder-efficientnet_b0 — визуальный энкодер семейства EfficientNet-B0, опубликованный mwalmsley для проекта Zoobot. Модель предназначена для извлечения признаковых векторов из изображений; её можно загружать как энкодер через библиотеку timm и использовать как основу для последующего обучения классификатора или других задач компьютерного зрения. В карточке указаны формат PyTorch и лицензия GPL-3.0. README не сообщает размер модели, набор данных, обучающие характеристики или специализацию на конкретном типе изображений. Поэтому качество признаков для отдельных предметных областей по этой карточке оценить нельзя.

1270март 2024
imageembeddinggpl-3.0hugging-face
ylacombe
accent-classifier

ylacombe/accent-classifier — модель классификации аудио, предназначенная для определения акцента в речевых записях. По названию репозитория и pipeline-тегу audio-classification её можно использовать для анализа аудиосигналов и отнесения речи к категориям акцента. Модель опубликована пользователем или организацией ylacombe и работает через библиотеку Transformers. В метаданных указаны теги wav2vec2 и safetensors; размер модели составляет около 1,3 млрд параметров. Языки, набор категорий акцентов, обучающие данные, контекст обработки и результаты оценки в доступных материалах не описаны. Модель может быть полезна для предварительного анализа речи, исследований вариативности произношения и построения приложений, которым требуется классификация акцента. Лицензия CC BY-NC 4.0 разрешает использование с указанием авторства и ограничивает коммерческое применение.

3417июнь 2024
textcc-by-nc-4.0hugging-face
Babblu2821
alpr-plate-detector

Babblu2821 разработала модель обнаружения автомобильных номерных знаков на базе YOLOv8s. Это одно-классовый детектор с 11,1 млн параметров, обученный в течение 100 эпох на изображениях размером 640 пикселей. Модель принимает изображения и возвращает ограничивающие рамки номерных знаков; распознавание символов в её задачи не входит. Модель предназначена для обнаружения номеров на фотографиях и видеокадрах как этапа конвейера автоматического распознавания номерных знаков. В README приведены результаты проверки на 465 изображениях: mAP@50 0,9921 и полнота 0,9979. Данные для обучения включали европейские и индийские номера; качество на номерах других регионов не проверено. Модель выдаёт прямоугольные рамки и не оценивает углы наклона номера, поэтому результат не позволяет корректно выправить перспективно искажённый номер для последующего OCR. Качество на очень маленьких номерах, при сильном смазывании движения и ночной съёмке не охарактеризовано. Проект заявлен как портфолио и учебная работа; обнаружение номеров не означает их чтение. Лицензия репозитория — MIT, а использованные наборы данных указаны как CC BY 4.0. Применение для слежения за людьми не рекомендуется; обработка номеров может подпадать под требования законодательства о персональных данных.

3271авг. 2026
imagemithugging-face
Lucyan85
beto-ner-prostata

Lucyan85/beto-ner-prostata — модель BETO на архитектуре BERT, дообученная автором Lucyan85 для распознавания именованных сущностей в клинических текстах о раке предстательной железы. Она выделяет десять типов сущностей: возраст пациента, биомаркеры, виды рака, оценку Глисона, классификацию TNM, лечение, лекарства, дозировки, хирургические процедуры и даты медицинских событий. Модель содержит 137,1 млн параметров и принимает испанский текст с контекстом до 512 токенов. В карточке указаны F1 96,18%, точность 95,86% и полнота 96,49%; эти показатели относятся к описанной автором оценке и не гарантируют аналогичных результатов на других данных. Для работы с моделью приведён пример использования через pipeline Transformers с задачей token-classification. Базовая модель — dccuchile/bert-base-spanish-wwm-cased. Лицензия в предоставленных данных не указана.

80июнь 2026ctx512
texthugging-face
timm
caformer_s18.sail_in22k

caformer_s18.sail_in22k — модель классификации изображений семейства CAFormer, разработанная авторами статьи MetaFormer Baselines for Vision и обученная на ImageNet-22k. Её также можно использовать как визуальный backbone для извлечения карт признаков и эмбеддингов изображений. Модель содержит около 69 млн параметров, имеет вычислительную стоимость 4,2 GMAC и рассчитана на изображения размером 224 × 224 пикселя. Она принимает изображения и выдаёт классовые оценки; также поддерживает извлечение визуальных признаков. Репозиторий содержит веса PyTorch и Safetensors, для работы используется библиотека timm. Лицензия — Apache-2.0. Модель предназначена для классификации изображений и извлечения признаков; качество вне обучающего набора ImageNet-22k и для изображений другого размера в карточке не охарактеризовано.

1.0K0май 2023
imageapache-2.0hugging-face
hfl
cino-small-v2

Карточка модели hfl/cino-small-v2 на Hugging Face совпадает с карточкой hfl/cino-base-v2, поэтому описание составлено по ней. CINO-base-v2 — многоязычная предварительно обученная языковая модель лаборатории HFL, совместной лаборатории HIT и iFLYTEK Research. Она построена на XLM-R и дополнительно обучена на корпусах китайского и ряда языков и языковых разновидностей Китая: тибетского, монгольского в уйгурской письменности, уйгурского, казахского в арабской письменности, корейского, чжуанского и кантонского. Модель предназначена для понимания текста на этих языках и может использоваться как основа для NLP-систем; её основная задача в каталоге — восстановление замаскированных токенов (fill-mask). Архитектура — XLM-RoBERTa для masked language modeling, размер — 217,2 млн параметров, длина контекста — 514 токенов. Доступны веса PyTorch и TensorFlow. Модель принимает текст и предсказывает замаскированные текстовые токены. README не приводит результаты оценивания или конкретные ограничения качества. Лицензия — Apache-2.0.

876март 2022ctx514
textapache-2.0hugging-face
tanganke
clip-vit-large-patch14_stanford-cars

Модель tanganke/clip-vit-large-patch14_stanford-cars — дообученная версия CLIP ViT-Large/14 на датасете Stanford Cars. Она содержит около 402,7 млн параметров и использует архитектуру CLIPVisionModel для извлечения признаков изображений. Модель подходит для получения представлений изображений автомобилей и задач классификации в сценариях, связанных с набором Stanford Cars. В README приведены результаты оценки: 0,777 для предварительно обученной модели и 0,927 после дообучения. В метаданных указан формат safetensors. Сведения о лицензии и поддерживаемых языках отсутствуют; языковая генерация не заявлена.

14K0апр. 2024
textembeddinghugging-face
tanganke
clip-vit-large-patch14_svhn

Модель tanganke/clip-vit-large-patch14_svhn — дообученная на наборе SVHN зрительная часть CLIP ViT-Large с размером патча 14. Она предназначена для извлечения признаков изображений, в частности для классификации изображений домовыми номерами из SVHN и построения представлений для последующих задач компьютерного зрения. Модель содержит около 402,7 млн параметров; в репозитории веса представлены в формате safetensors. В карточке приведены результаты оценки на SVHN: 0,588 для исходной предварительно обученной модели и 0,979 после дообучения. Эти значения указывают на улучшение в указанной оценке, но карточка не описывает метрику и протокол проверки. Базовая модель — openai/clip-vit-large-patch14. Условия лицензирования в предоставленных данных не приведены.

13K0апр. 2024
textembeddinghugging-face
timm
coatnext_nano_rw_224.sw_in1k

CoAtNeXt Nano — модель классификации изображений из библиотеки timm, обученная Россом Уайтманом на ImageNet-1k. Архитектура CoAtNeXt сочетает блоки ConvNeXt на ранних этапах с блоками self-attention на последующих; модель содержит около 14,7 млн параметров и рассчитана на изображения размером 224 × 224 пикселя. Модель предназначена для отнесения изображений к категориям ImageNet-1k и может использоваться как визуальный backbone для извлечения карт признаков и эмбеддингов. В карточке приведены показатели top-1 81,95% и top-5 95,92% на ImageNet-1k. Репозиторий распространяется под лицензией Apache-2.0.

5051янв. 2023
imageapache-2.0hugging-face
timm
crossvit_18_240.in1k

CrossViT-18-240 — модель классификации изображений и визуальный backbone семейства CrossViT, обученная авторами статьи на ImageNet-1k. Архитектура использует vision transformer с перекрёстным вниманием между масштабами. Модель содержит 43,3 млн параметров, обрабатывает изображения размером 240 × 240 и требует около 9,1 GMACs на проход. Модель предназначена для классификации изображений по классам ImageNet-1k, а также может использоваться как backbone для извлечения визуальных признаков и эмбеддингов. Доступны веса PyTorch и safetensors для библиотеки timm. Лицензия — Apache-2.0.

990апр. 2023
imageapache-2.0hugging-face
timm
cs3darknet_m.c2ns_in1k

cs3darknet_m.c2ns_in1k — сверточная модель классификации изображений и извлечения признаков из семейства CS3-DarkNet, опубликованная в библиотеке timm. Она обучена на ImageNet-1k и может использоваться как классификатор изображений, базовая сеть для получения карт признаков и источник визуальных эмбеддингов. Модель содержит 9,3 млн параметров и требует изображения размером 288 × 288 при тестировании; обучение проводилось на изображениях 256 × 256. В обучении применялась схема ResNet Strikes Back C без repeat-augmentation, с усиленным mixup, оптимизатором SGD с Nesterov, адаптивным ограничением градиентов AGC и косинусным расписанием скорости обучения с разогревом. Вариант ns не использует stochastic depth. Модель распространяется под лицензией Apache-2.0. Карточка не сообщает о специализированной поддержке языков или других модальностей помимо изображений.

2820апр. 2023
imageapache-2.0hugging-face
HooshvareLab
distilbert-fa-zwnj-base

HooshvareLab/distilbert-fa-zwnj-base — персидская модель семейства DistilBERT от HooshvareLab для предсказания пропущенных токенов в тексте. Она обучена на разнотипных корпусах с новым словарём и предназначена, в частности, для работы с символом нулевой ширины, который влияет на написание персидских слов. Модель использует архитектуру DistilBertForMaskedLM, принимает текст и предсказывает замаскированные токены. Максимальная длина контекста — 512 токенов. Доступны веса в форматах PyTorch и TensorFlow. Лицензия — Apache-2.0. Модель ориентирована на персидский язык; README не описывает её пригодность для других языков или задач. Качество на конкретных наборах данных и другие ограничения в карточке не приведены.

8122март 2022ctx512
textapache-2.0hugging-face
gokulan006
distilbert-reddit-mental-health-risk-classifier

Модель gokulan006/distilbert-reddit-mental-health-risk-classifier разработана в рамках проекта Google Summer of Code 2026 совместно с HumanAI. Это дообученная DistilBERT для классификации текстовых публикаций Reddit по трём уровням риска для психического здоровья: низкому, умеренному и высокому. Она принимает текст и выдаёт метку класса; контекст ограничен 512 токенами. В описанной оценке лучшая точность составила 85,80%, а взвешенная F1-мера — 85,71%. Модель рассчитана на исследования, NLP-бенчмаркинг и прототипы мониторинга кризисных состояний. Лицензия в метаданных — Apache-2.0. Классификатор может выделять публикации с упоминаниями суицидальных мыслей и самоповреждения, а также тексты о депрессии, тревоге и эмоциональном неблагополучии. Он не предоставляет медицинских рекомендаций: точность зависит от площадки, стиля письма и популяции, а предсказания не подходят как единственное основание для клинических или экстренных решений; для высокорисковых случаев рекомендуется проверка человеком.

180июль 2026ctx512
textapache-2.0hugging-face
Sandiago21
distilhubert-finetuned-gtzan

Sandiago21 дообучил модель ntu-spml/distilhubert на наборе GTZAN для классификации аудио. Модель построена на архитектуре HuBERT, содержит 18,9 млн параметров и предназначена для распознавания музыкальных жанров по аудиозаписям. На оценочном наборе указаны точность 0,88 и значение потерь 0,5358. Модель использует PyTorch и доступна в форматах PyTorch и Safetensors. Лицензия — Apache-2.0.

132июль 2023
textapache-2.0hugging-face
ajrayman
Extra_binary

Extrabinary — дообученная модель классификации последовательностей на базе microsoft/deberta-v3-base. Она предназначена для отнесения текста к одному из классов; название Extra_binary может указывать на бинарную классификацию, однако README не уточняет сами классы и назначение разметки. Модель содержит 211,6 млн параметров, использует архитектуру DeBERTa v2 и принимает текстовые последовательности длиной до 512 токенов. В README приведены результаты оценки: accuracy 0,6276, precision 0,5938, recall 0,8055, F1 0,6836 и AUC 0,7116. Датасет указан как None, а сведения о сценариях применения и обучающих данных отсутствуют, поэтому качество для конкретной задачи по этим метрикам определить нельзя. Модель распространяется по лицензии MIT.

170окт. 2024ctx512
textmithugging-face
Kaludi
food-category-classification-v2.0

Kaludi/food-category-classification-v2.0 — модель компьютерного зрения, разработанная Kaludi для классификации изображений еды. Она построена на архитектуре Swin и содержит 58,7 млн параметров; принимает изображение и относит его к одной из 12 категорий: хлеб, молочные продукты, десерт, яйца, жареная еда, фрукты, мясо, лапша, рис, морепродукты, суп или овощи. Модель подходит для автоматической сортировки фотографий в каталогах фуд-блогов, ресторанов и сайтов с рецептами. В README приведены метрики валидации: точность 0,960 и macro F1 0,959. Эти результаты относятся к описанной проверке и не гарантируют такого же качества на других изображениях и данных. Лицензия в предоставленных источниках не указана.

35935февр. 2023
imagehugging-face
dima806
fruit_vegetable_image_detection

Dima806 дообучил модель Google ViT Base Patch16 224 In21k для классификации изображений фруктов и овощей. Это Vision Transformer с 113,2 млн параметров, предназначенный для определения класса объекта на изображении. Модель принимает изображения и выдаёт метки классов. Модель распространяется в форматах PyTorch и Safetensors по лицензии Apache 2.0. Карточка не содержит сведений о наборе классов или качестве распознавания, поэтому их нельзя оценить по доступным данным.

453сент. 2023
imageapache-2.0hugging-face
beshkenadze
g2p-multilingual-byT5-tiny-mlx

beshkenadze/g2p-multilingual-byT5-tiny-mlx — конвертированная для MLX модель на базе ByT5 от Charsiu для преобразования написания слов в фонемную транскрипцию. Она принимает текст и выдаёт последовательность фонем в IPA; карточка показывает пример для американского английского. Модель поддерживает 100 языков и предназначена для запуска на устройствах Apple с MLX, в том числе через CharsiuG2PKit для Swift. В метаданных указано 11,1 млн параметров, архитектура T5ForConditionalGeneration и формат SafeTensors; README приводит PER 0,096 и WER 0,281. Репозиторий содержит конверсию исходной модели charsiu/g2p_multilingual_byT5_tiny_16_layers_100 из PyTorch в SafeTensors для MLX, а не самостоятельное дообучение. Метаданные указывают лицензию MIT. Число параметров в README отличается от метаданных, поэтому размер приведён по метаданным.

3800март 2026
textmithugging-face
MarekCech
GenreVim-Music-Classification-DistilHuBERT

MarekCech разработал эту модель на основе ntu-spml/distilhubert, дообучив её для классификации музыкальных жанров. Модель использует архитектуру HuBERT и содержит 18,9 млн параметров; веса опубликованы в формате Safetensors. Модель предназначена для определения жанра по аудиозаписи. В карточке перечислены 18 жанров: блюз, классическая музыка, кантри, Drum & Bass, Dubstep, фолк, Future Bass, Hardstyle, House, джаз, латинская музыка, металл, поп, R&B и соул, рэп, регги, рок и трэп. Лицензия в доступных данных не указана.

920июль 2024
texthugging-face
scherrmann
GermanFinBert_FP

German FinBERT Further Pre-trained Version — немецкоязычная модель BERT для финансовых текстов, разработанная Морицем Шеррманном. Это продолжительно предобученный чекпойнт на основе deepset/gbert-base: модель обучалась на корпусе финансовых и новостных документов на немецком языке, охватывающем период с 1996 по 2023 год. Модель предназначена для заполнения пропусков в немецких финансовых текстах и служит основой для специализированных задач, таких как классификация финансовых новостей, анализ тональности и извлечение ответов на вопросы. Архитектура — BERT base с 137,1 млн параметров; максимальная длина контекста составляет 512 токенов. Репозиторий предоставляет веса PyTorch, лицензия — Apache-2.0. Профильное предобучение улучшает результаты на финансовых задачах по сравнению с общей немецкой моделью, согласно карточке автора. Сам опубликованный чекпойнт размечен для fill-mask; показатели классификации и вопросно-ответных задач относятся к downstream-настройкам и не означают, что этот чекпойнт напрямую выполняет их без дополнительной адаптации. Данные, на которых продолжалось обучение, включают финансовые документы, новости и другие источники, поэтому качество на иных темах и языках не заявлено.

841нояб. 2023ctx512
textapache-2.0hugging-face
timm
ghostnetv2_100.in1k

GhostNetV2 1.0 — сверточная модель классификации изображений и извлечения признаков из семейства GhostNetV2, созданная авторами исследования и обученная на ImageNet-1k. Она подходит для распознавания объектов на изображениях, получения карт признаков и визуальных эмбеддингов; модель рассчитана на входной размер 224 × 224 пикселя. Модель содержит 6,2 млн параметров и требует около 0,2 GMAC на изображение, что делает её компактной основой для компьютерного зрения и развёртывания с ограниченными вычислительными ресурсами. Репозиторий предоставляет веса PyTorch и safetensors, а работа с моделью ориентирована на библиотеку timm. Лицензия — Apache-2.0.

4.5K1авг. 2023
imageapache-2.0hugging-face
KoichiYasuoka
gpt2-medium-japanese-upos

Koichi Yasuoka разработал модель GPT-2 для морфологического анализа японского текста. Она дообучена на основе ku-nlp/gpt2-medium-japanese-char и присваивает каждому короткому слову универсальную часть речи UPOS и признаки FEATS; карточка также указывает поддержку синтаксического разбора зависимостей. Модель предназначена для разметки японских предложений и может использоваться в конвейерах анализа текста через Transformers. Модель использует плотную архитектуру GPT-2 и принимает текст, выдавая токенную разметку. Контекст составляет 1024 токена. Репозиторий содержит веса PyTorch, лицензия — CC BY-SA 4.0. README предлагает запуск через pipeline с пользовательским кодом.

1080июнь 2024ctx1K
textcc-by-sa-4.0hugging-face
Sentdex
GPyT

GPyT — авторегрессионная модель GPT-2, созданная Sentdex с нуля и обученная на корпусе примерно из 80 ГБ кода Python из GitHub. Это генеративная языковая модель для продолжения фрагментов Python-кода: на вход подают код, а модель дописывает его. Контекст составляет 1024 токена; перед обработкой символы переноса строк нужно заменять специальным маркером и восстанавливать после генерации. В репозитории доступны форматы PyTorch и TensorFlow, лицензия — MIT. Модель может быть полезна для учебных экспериментов и исследований генерации кода. Она прошла лишь два эпоха обучения, поэтому дальнейшее обучение или дообучение может улучшить результаты. Корпус собран без фильтрации и содержит как Python 2, так и Python 3, а также различия в стиле форматирования. Модель может дословно воспроизводить фрагменты обучающих данных; пригодность и лицензирование сгенерированного кода нужно проверять самостоятельно. Выводы могут быть некорректными или небезопасными, поэтому код следует проверять перед запуском.

11522март 2022ctx1K
textmithugging-face
bosonai
hubert_base

Boson AI HuBERT Base — базовый чекпойнт HuBERT от Boson AI, используемый как семантический учитель во внутренней ветви токенизатора Higgs Audio. Модель построена на архитектуре HuBERT-Base с 12 трансформерными слоями, скрытым размером 768 и примерно 95 млн параметров по README; метаданные указывают 113,3 млн параметров. Принимает аудио с частотой дискретизации 16 кГц и через Transformers AutoModel выдаёт последовательности скрытых представлений размерности 768; можно извлекать состояния всех слоёв. Основной сценарий — получение семантических признаков речи и аудио для последующей дистилляции или использования в аудиотокенизаторе. В карточке также заявлена задача feature extraction. Модель распространяется под лицензией Apache-2.0. Для загрузки README указывает trust_remote_code=True.

22K3июль 2025
textembeddingapache-2.0hugging-face

Задачи профессии

22 задачи
400Профилирование нового набора данных. — Механизм: AI сопоставляет наблюдаемое состояние с эталонами, нормативами или историческими аналогами и оценивает степень соответствия. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. Исходные данные: таблицы и события, схемы и определения бизнес-метрик. Формат результата: оценка по задаче «Профилирование нового набора данных» в числовой или категориальной форме с расшифровкой факторов, допущений и неопределённости. Проверка: сверкой с экспертными оценками или фактическими исходами, а также анализом чувствительности к входным данным; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
401Определение вероятного смысла и типа столбцов. — AI сопоставляет наблюдаемые признаки с критериями и устанавливает требуемое значение, состояние или вариант. К исходным данным относятся таблицы, события, файлы и схемы. Формат результата: установленное значение или вариант по задаче «Определение вероятного смысла и типа столбцов» с оценкой уверенности и основаниями решения. Надёжность оценивают по точности относительно эталона, калибровке уверенности и разбору случаев, где источники расходятся; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
402Обнаружение пропусков, выбросов и невозможных значений. — Для этой задачи система анализирует поток наблюдений и локализует признаки, которые отличают целевой объект или нарушение от обычного состояния. Рабочие входы: события, файлы, схемы и каталоги данных. Формат результата: перечень объектов, событий или отклонений, относящихся к «Обнаружение пропусков, выбросов и невозможных значений», с локализацией, уверенностью и признаками срабатывания. Критерии приёмки: по полноте обнаружения, доле ложных срабатываний и качеству локализации на независимой выборке; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
403Выбор стратегии заполнения пропущенных данных. — Практическая реализация: AI объединяет историю, текущую ситуацию и обязательные условия, чтобы предложить следующий наиболее обоснованный шаг. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. Входной контекст включает таблицы и события, схемы и определения бизнес-метрик. Формат результата: несколько вариантов для «Выбор стратегии заполнения пропущенных данных», ранжированных по полезности, ограничениям и причинам выбора. Ошибки выявляют по полезности для пользователя, соблюдению ограничений и качеству результата после принятия рекомендации; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
404Очистка и стандартизация категориальных значений. — Механизм: AI преобразует исходный материал по заданным правилам, сохраняя смысл, структуру и критически важные детали. Исходные данные: схемы, каталоги данных, SQL и бизнес-метрики. Формат результата: преобразованный материал по задаче «Очистка и стандартизация категориальных значений» с сохранённым содержанием и журналом значимых изменений. Проверка: сравнением смысла и структуры до и после преобразования, а также поиском потерянных элементов; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
405Сопоставление и объединение данных из разных источников. — AI строит единое пространство признаков и устанавливает соответствия между элементами, которые описаны по-разному. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. К исходным данным относятся таблицы и события, схемы и определения бизнес-метрик. Формат результата: карта соответствий и различий для «Сопоставление и объединение данных из разных источников», где элементы приведены к единым критериям и связаны с первичными данными. Надёжность оценивают экспертной сверкой соответствий и проверкой, что различия не вызваны несовместимыми форматами; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
406Автоматическое построение ETL/ELT-конвейера. — Для этой задачи система объединяет уравнения, эмпирические данные и обученные зависимости в модель, пригодную для анализа чувствительности. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. Рабочие входы: таблицы и события, схемы и определения бизнес-метрик. Формат результата: вычислительная модель или карта для «Автоматическое построение ETL/ELT-конвейера» с результатами сценариев и анализом чувствительности. Критерии приёмки: сопоставлением с наблюдениями, тестами чувствительности и воспроизводимостью вычислений; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
407Генерация преобразований данных по словесному описанию. — Практическая реализация: AI создаёт новый артефакт по требованиям, исходным фактам и примерам, сохраняя возможность последующего редактирования. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. Входной контекст включает таблицы и события, схемы и определения бизнес-метрик. Формат результата: редактируемый артефакт по задаче «Генерация преобразований данных по словесному описанию», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — аналитический набор или запрос. Ошибки выявляют по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
408Проверка качества данных по автоматически предложенным правилам. — Механизм: AI сверяет объект с эталоном, правилами и взаимными зависимостями, отмечая пропуски, конфликты и нарушения. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. Исходные данные: таблицы и события, схемы и определения бизнес-метрик. Формат результата: протокол выполнения «Проверка качества данных по автоматически предложенным правилам» с пройденными условиями, найденными нарушениями и спорными местами для ручного решения. Проверка: повторным запуском на эталонных примерах, ручной проверкой спорных случаев и полнотой контрольного покрытия; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
409Обнаружение нарушения контрактов данных. — AI сочетает обученные шаблоны с контрольными правилами, чтобы находить значимые случаи и не пропускать пограничные примеры. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. К исходным данным относятся таблицы и события, схемы и определения бизнес-метрик. Формат результата: перечень объектов, событий или отклонений, относящихся к «Обнаружение нарушения контрактов данных», с локализацией, уверенностью и признаками срабатывания. Надёжность оценивают по полноте обнаружения, доле ложных срабатываний и качеству локализации на независимой выборке; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
410Анализ происхождения показателя и цепочки преобразований. — Для этой задачи система разбирает данные по существенным признакам, выявляет связи и формирует выводы с привязкой к исходным свидетельствам. Рабочие входы: файлы, схемы, каталоги данных и SQL. Формат результата: объяснимые выводы по задаче «Анализ происхождения показателя и цепочки преобразований» с влияющими факторами, альтернативными трактовками и ссылками на данные. Критерии приёмки: воспроизводимостью расчётов, проверкой источников и сравнением выводов с альтернативными объяснениями; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
411Генерация SQL по вопросу на естественном языке. — Практическая реализация: AI собирает содержание и структуру из заданных ограничений, затем формирует несколько вариантов для выбора и доработки. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. Входной контекст включает таблицы и события, схемы и определения бизнес-метрик. Формат результата: редактируемый артефакт по задаче «Генерация SQL по вопросу на естественном языке», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — аналитический набор или запрос. Ошибки выявляют по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
412Объяснение SQL-запроса и поиск логических ошибок. — Механизм: AI агрегирует разрозненные сигналы в целостную картину и показывает, какие данные поддерживают каждый вывод. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. Исходные данные: таблицы и события, схемы и определения бизнес-метрик. Формат результата: объяснимые выводы по задаче «Объяснение SQL-запроса и поиск логических ошибок» с влияющими факторами, альтернативными трактовками и ссылками на данные. Проверка: воспроизводимостью расчётов, проверкой источников и сравнением выводов с альтернативными объяснениями; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
413Автоматическое построение подходящей визуализации. — AI создаёт вычислительное представление объекта или процесса и проигрывает на нём альтернативные сценарии. К исходным данным относятся SQL, бизнес-метрики, таблицы и события. Формат результата: вычислительная модель или карта для «Автоматическое построение подходящей визуализации» с результатами сценариев и анализом чувствительности. Надёжность оценивают сопоставлением с наблюдениями, тестами чувствительности и воспроизводимостью вычислений; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
414Создание смыслового слоя метрик. — Для этой задачи система собирает содержание и структуру из заданных ограничений, затем формирует несколько вариантов для выбора и доработки. Предметная логика: профилирует источники, связывает преобразования и проверяет согласованность агрегатов. Рабочие входы: таблицы и события, схемы и определения бизнес-метрик. Формат результата: редактируемый артефакт по задаче «Создание смыслового слоя метрик», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — аналитический набор или запрос. Критерии приёмки: по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
415Объяснение изменения показателя через декомпозицию факторов. — Практическая реализация: AI агрегирует разрозненные сигналы в целостную картину и показывает, какие данные поддерживают каждый вывод. Входной контекст включает таблицы, события, файлы и схемы. Формат результата: объяснимые выводы по задаче «Объяснение изменения показателя через декомпозицию факторов» с влияющими факторами, альтернативными трактовками и ссылками на данные. Ошибки выявляют воспроизводимостью расчётов, проверкой источников и сравнением выводов с альтернативными объяснениями; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
416Когортный анализ. — Механизм: AI разбирает данные по существенным признакам, выявляет связи и формирует выводы с привязкой к исходным свидетельствам. Исходные данные: события, файлы, схемы и каталоги данных. Формат результата: объяснимые выводы по задаче «Когортный анализ» с влияющими факторами, альтернативными трактовками и ссылками на данные. Проверка: воспроизводимостью расчётов, проверкой источников и сравнением выводов с альтернативными объяснениями; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
417Анализ воронки и точек потери. — AI сопоставляет наблюдения, отделяет устойчивые закономерности от случайных совпадений и объясняет влияющие факторы. К исходным данным относятся файлы, схемы, каталоги данных и SQL. Формат результата: объяснимые выводы по задаче «Анализ воронки и точек потери» с влияющими факторами, альтернативными трактовками и ссылками на данные. Надёжность оценивают воспроизводимостью расчётов, проверкой источников и сравнением выводов с альтернативными объяснениями; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
418Сегментация объектов по поведению. — Для этой задачи система строит границы между категориями и ранжирует объекты так, чтобы наиболее важные или срочные обрабатывались раньше. Рабочие входы: схемы, каталоги данных, SQL и бизнес-метрики. Формат результата: результат «Сегментация объектов по поведению» в виде метки, класса, ранга или тематического слоя с уверенностью и объясняющими признаками. Критерии приёмки: по матрице ошибок, калибровке уверенности и отдельному анализу пограничных классов; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
419Поиск статистически значимых зависимостей. — Практическая реализация: AI индексирует доступные материалы, понимает смысл запроса и ранжирует кандидатов по содержательному совпадению. Входной контекст включает каталоги данных, SQL, бизнес-метрики и таблицы. Формат результата: ранжированный список кандидатов по задаче «Поиск статистически значимых зависимостей» со ссылками на источники, оценкой соответствия и фрагментами подтверждения. Ошибки выявляют по релевантности, полноте, отсутствию недопустимых источников и точности ссылок на подтверждение; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
420Подготовка аналитического отчёта с выводами и оговорками. — Механизм: AI собирает содержание и структуру из заданных ограничений, затем формирует несколько вариантов для выбора и доработки. Исходные данные: SQL, бизнес-метрики, таблицы и события. Формат результата: редактируемый артефакт по задаче «Подготовка аналитического отчёта с выводами и оговорками», согласованный с исходными фактами, форматом и ограничениями; тип артефакта — аналитический набор или запрос. Проверка: по соответствию фактам, требованиям, формату и качеству последующей экспертной доработки; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик.
421Естественно-языковой интерфейс к BI-системе. — AI обходит разрешённые источники, объединяет найденное и отсеивает нерелевантные либо дублирующиеся результаты. К исходным данным относятся бизнес-метрики, таблицы, события и файлы. Формат результата: ранжированный список кандидатов по задаче «Естественно-языковой интерфейс к BI-системе» со ссылками на источники, оценкой соответствия и фрагментами подтверждения. Надёжность оценивают по релевантности, полноте, отсутствию недопустимых источников и точности ссылок на подтверждение; тестами качества данных, сверкой агрегатов, lineage, повторяемостью запросов и согласованием определения метрик. <a id="section-ii-9"></a>

0 моделей