/ Профессии
Универсальные способности и операции

I.3Извлечение и структурирование данных

В разделе собраны самостоятельные задачи, где AI помогает превращать разрозненные данные в структуру, пригодную для поиска, аналитики и автоматизации. Для каждого пункта отдельно указаны механизм, входы, результат и способ проверки.

ЭмбеддингиТекст
AI-задач
18
в этой профессии
Подходящих моделей
25 791
по типу задач и модальности
Категория
I. Универсальные способности
Основные типы
ЭмбеддингиТекст

Рекомендованные модели

25 791 модель
Загрузки
Лайки
Дата выхода
1 921–1 950 из 25 791
OpenMed
OpenMed-NER-PharmaDetect-BigMed-278M

OpenMed/OpenMed-NER-PharmaDetect-BigMed-278M — специализированная модель OpenMed для распознавания химических сущностей в биомедицинских текстах. Она дообучена на корпусе BC5CDR-Chem и построена на архитектуре XLM-RoBERTa; метаданные указывают 305,2 млн параметров и контекст до 514 токенов. Модель принимает токенизированный текст и выдаёт BIO-разметку сущностей типов B-CHEM и I-CHEM. Модель предназначена для извлечения названий химических соединений, лекарств и терапевтических веществ из научных публикаций и медицинских документов. Такие извлечения могут служить основой для мониторинга нежелательных явлений, анализа упоминаний препаратов и построения биомедицинских баз знаний. В README заявлены F1 0,95, точность 0,93 и полнота 0,96 на BC5CDR-Chem; эти результаты относятся к указанному набору данных и не гарантируют такое же качество на других текстах. Обучение ориентировано на химические сущности BC5CDR, поэтому охват других типов сущностей и перенос на иные домены ограничены. Лицензия — Apache-2.0.

216K6июль 2025ctx514
textapache-2.0hugging-face
OpenMed
OpenMed-NER-ProteinDetect-BigMed-560M

OpenMed-NER-ProteinDetect-BigMed-560M — модель OpenMed для распознавания биомедицинских сущностей в тексте. Это дообученная трансформерная модель XLM-RoBERTa с архитектурой XLMRobertaForTokenClassification и примерно 658,7 млн параметров. Она принимает токенизированный текст и выдаёт BIO-разметку сущностей; в карточке перечислены белки, белковые комплексы, семейства и группы белков, а также варианты белков. Для одного фрагмента текста длина контекста составляет 514 токенов. Модель предназначена для извлечения белковых сущностей из научной и биомедицинской литературы, клинических текстов и документов, а также для поддержки анализа взаимодействий белков, поиска по литературе и построения биомедицинских баз знаний. В README сообщаются результаты на корпусе FSU: F1 0,95, точность 0,95, полнота 0,96 и accuracy 0,98; эти показатели относятся к описанной оценке и не гарантируют аналогичного качества на других данных. Карточка указывает датасет FSU и лицензию Apache-2.0.

93K0июль 2025ctx514
textapache-2.0hugging-face
OpenMed
OpenMed-PII-BiomedELECTRA-Base-110M-v1

OpenMed разработала OpenMed-PII-BiomedELECTRA-Base-110M-v1 — англоязычную модель на базе BiomedELECTRA для токенной классификации и обнаружения 54 типов персональных и медицинских идентификаторов в тексте. Модель дообучена на наборе NVIDIA Nemotron-PII; архитектура относится к семейству BERT, содержит 136,7 млн параметров и принимает последовательности длиной до 512 токенов. Модель предназначена для поиска чувствительных данных в клинических записях, медицинских документах и других текстах, чтобы поддерживать обезличивание, подготовку данных и аудит приватности. В README сообщается о micro F1 0,9431 на тестовой выборке из 2 000 примеров; среди распознаваемых сущностей есть имена, адреса, медицинские номера, финансовые и контактные данные. Результаты могут зависеть от предметной области: для некоторых категорий, включая время, пол и религиозные убеждения, качество ниже. Возможны пропуски, поэтому критически важные результаты требуют проверки человеком; модель обучена преимущественно на английском языке. Распространяется по лицензии Apache-2.0.

6.0K0янв. 2026ctx512
textapache-2.0hugging-face
OpenMed
OpenMed-PII-ClinicalBGE-Large-568M-v1

OpenMed-PII-ClinicalBGE-Large-568M-v1 — модель OpenMed для обнаружения и классификации персональных и иных чувствительных данных в тексте. Это дообученная на наборе NVIDIA Nemotron-PII модель токеновой классификации на архитектуре XLM-RoBERTa с 658,7 млн параметров и контекстом до 8194 токенов. Она выделяет 54 типа сущностей, включая имена, адреса, контактные данные, финансовые идентификаторы и медицинские сведения. Модель предназначена для поиска чувствительных данных в клинических записях, медицинских документах и других текстах, а также для подготовки данных к обезличиванию, аудиту и проверке приватности. В README сообщается Micro F1 0,9587 на тестовой выборке из 2000 примеров; точность и полнота составили 0,9636 и 0,9538. Основной язык — английский. Модель распространяется по лицензии Apache-2.0. Результаты следует проверять человеком: модель может пропускать персональные данные, а качество зависит от контекста и категории сущности. В карточке отмечены более низкие результаты для ряда категорий, включая occupation, time и sexuality; для критичных сценариев требуется дополнительная проверка.

2.6K0янв. 2026ctx8.2K
textapache-2.0hugging-face
OpenMed
OpenMed-PII-French-ClinicalBGE-Large-335M-v1

OpenMed-PII-French-ClinicalBGE-Large-335M-v1 — модель OpenMed на архитектуре BERT, дообученная на базе BAAI/bge-large-en-v1.5 для токенной классификации и выявления персональных данных во французском тексте. Она размечает 54 типа чувствительных сущностей, в том числе имена, адреса, контактные данные, финансовые идентификаторы и медицинские номера; заявленный размер в метаданных — 433,9 млн параметров, длина контекста — 512 токенов. Модель предназначена для поиска персональных данных в клинических записях и документах, автоматизированного обезличивания, подготовки исследовательских наборов данных и аудита документов в процессах защиты приватности. В карточке приведена оценка micro-F1 0,9668 на французской части набора AI4Privacy; модель может помочь выявить широкий спектр сущностей в конвейере обработки текста. Результаты требуют проверки человеком: часть чувствительных данных может быть пропущена, а качество зависит от терминологии и контекста. Модель оптимизирована для французского и может работать хуже на других языках. Лицензия — Apache-2.0.

5.1K0февр. 2026ctx512
textapache-2.0hugging-face
OpenMed
OpenMed-PII-French-SuperClinical-Base-184M-v1

OpenMed-PII-French-SuperClinical-Base-184M-v1 — модель OpenMed на базе DeBERTa-v3-base, дообученная для распознавания и классификации персональных данных во французском тексте. Это трансформерная модель классификации токенов с контекстом до 512 токенов; она размечает сущности по 54 категориям, включая идентификаторы, личные и медицинские сведения, контакты, адреса и финансовые данные. Модель предназначена для обнаружения и обезличивания данных во французских клинических записях, медицинских документах и других текстовых коллекциях, а также для подготовки наборов данных и аудита конфиденциальности. В README указана оценка Micro F1 0,9663 на французской части AI4Privacy. Модель принимает текст и возвращает метки сущностей для токенов; результат следует проверять человеком, поскольку возможны пропуски и качество может меняться на специализированной терминологии. Модель оптимизирована для французского и может хуже работать на других языках. Лицензия — Apache-2.0.

8.7K0февр. 2026ctx512
textapache-2.0hugging-face
OpenMed
OpenMed-PII-German-ClinicDischarge-Base-110M-v1

OpenMed-PII-German-ClinicDischarge-Base-110M-v1 — модель OpenMed для выявления и классификации персональных данных в немецком тексте. Это модель токеновой классификации на базе BERT, дообученная на Bio_Discharge_Summary_BERT; она содержит 135,5 млн параметров и обрабатывает последовательности длиной до 512 токенов. Модель распознаёт 54 типа чувствительных сущностей, включая имена, адреса, контактные данные, идентификаторы, финансовые и медицинские сведения. Она предназначена для обезличивания клинических записей и других документов, подготовки наборов данных к исследованиям и поиска персональных данных при проверке документов. В README сообщается о micro F1 0,9308 на немецкой части набора AI4Privacy. Модель оптимизирована для немецкого языка. README предупреждает, что она может пропускать некоторые данные, а качество зависит от предметной области; для важных сценариев требуется проверка человеком. Лицензия — Apache-2.0.

7.5K0февр. 2026ctx512
textapache-2.0hugging-face
OpenMed
OpenMed-PII-Italian-BioClinicalModern-Base-149M-v1

OpenMed-PII-Italian-BioClinicalModern-Base-149M-v1 — модель OpenMed для поиска и классификации персональных данных в итальянском тексте. Это дообученная на задаче разметки токенов модель ModernBERT с 149 млн параметров; она принимает текст и присваивает токенам BIO-метки для 54 типов чувствительной информации, включая имена, адреса, контактные, финансовые и медицинские сведения. Родительская модель — thomas-sounack/BioClinical-ModernBERT-base. Модель предназначена для выявления PII в клинических заметках, медицинских записях и других документах, чтобы поддерживать обезличивание данных, подготовку наборов для исследований и проверку коллекций документов. В README приведён результат micro-F1 0,9395 на итальянской части набора AI4Privacy; контекст составляет до 8192 токенов. Для критичных сценариев требуется проверка человеком: модель может пропускать персональные данные, её качество зависит от терминологии и оптимизировано для итальянского языка. Распространяется по лицензии Apache-2.0.

14K0февр. 2026ctx8.2K
textapache-2.0hugging-face
OpenMed
OpenMed-PII-Italian-ClinicalE5-Large-335M-v1

OpenMed-PII-Italian-ClinicalE5-Large-335M-v1 — модель OpenMed для обнаружения и классификации персональных данных в итальянском тексте. Это дообученный для разметки токенов трансформер семейства BERT на основе intfloat/e5-large-v2: метаданные указывают 433,9 млн параметров и контекст до 512 токенов. Модель помечает 54 типа сущностей, включая имена, адреса, идентификаторы, контактные, финансовые и медицинские данные. Модель предназначена для поиска чувствительных данных в клинических записях, медицинской документации и других италоязычных текстах, чтобы поддерживать обезличивание, подготовку исследовательских наборов и аудит документов. В README указана оценка micro F1 0,9569 на итальянской части AI4Privacy; результат относится к описанной оценке и не гарантирует такую же точность на других данных. По заявлению авторов, модель готова к практическому использованию, но её следует применять как вспомогательный инструмент с проверкой результатов человеком: возможны пропуски, а качество зависит от предметной области. Лицензия — Apache-2.0.

13K0февр. 2026ctx512
textapache-2.0hugging-face
OpenMed
OpenMed-PII-Italian-ClinicDischarge-Base-110M-v1

OpenMed-PII-Italian-ClinicDischarge-Base-110M-v1 — модель OpenMed на базе BERT, дообученная для обнаружения и классификации персональных данных в итальянском тексте. Она предназначена для разметки токенов с типами чувствительных сведений, включая имена, адреса, идентификаторы, контакты и медицинские данные, в клинических заметках, выписках и других документах. Модель содержит 135,5 млн параметров, использует архитектуру BertForTokenClassification и принимает последовательности длиной до 512 токенов. По данным карточки, она обучена на итальянской части набора AI4Privacy PII Masking 400k и показывает micro F1 0,9306 на этой выборке. Результаты могут снижаться на других типах текста и терминологии; пропуски PII возможны, поэтому критические результаты следует проверять вручную. Лицензия — Apache-2.0.

4.0K0февр. 2026ctx512
textapache-2.0hugging-face
OpenMed
OpenMed-PII-Italian-SuperClinical-Base-184M-v1

OpenMed-PII-Italian-SuperClinical-Base-184M-v1 — модель OpenMed для обнаружения и классификации персональных данных в итальянском тексте. Это дообученная на базе Microsoft DeBERTa-v3-base модель DeBERTa для классификации токенов: она размечает 54 типа сущностей, включая имена, адреса, идентификаторы, контактные, финансовые и медицинские сведения. Размер по метаданным — 211,6 млн параметров, контекст — до 512 токенов; модель работает с текстом и выдаёт метки сущностей.

5.8K0февр. 2026ctx512
textapache-2.0hugging-face
OpenMed
OpenMed-PII-LiteClinical-Small-66M-v1

OpenMed-PII-LiteClinical-Small-66M-v1 — англоязычная модель OpenMed на базе DistilBERT, дообученная для токенной классификации и обнаружения 54 типов персональных и чувствительных данных в тексте. Она размечает имена, адреса, контактные данные, идентификаторы, финансовые сведения и клиническую информацию; размер модели — 66 млн параметров, контекст — до 512 токенов. Модель предназначена для поиска и последующего удаления или маскирования чувствительных данных в клинических заметках, медицинских документах и других текстовых коллекциях, а также для подготовки наборов данных и аудита конфиденциальности. В карточке приведён micro-F1 0,9485 на тестовой выборке NVIDIA Nemotron-PII из 2 000 примеров. Распространяется по лицензии Apache-2.0. Это вспомогательный инструмент: пропуски и ошибки разметки возможны, поэтому для важных сценариев требуется проверка человеком. Модель обучена преимущественно на английском языке, а качество может меняться на специализированной терминологии; для некоторых категорий точность ниже.

1.3K0янв. 2026ctx512
textapache-2.0hugging-face
OpenMed
OpenMed-PII-mClinicalE5-Large-560M-v1

OpenMed разработала OpenMed-PII-mClinicalE5-Large-560M-v1 — модель классификации токенов на базе XLM-RoBERTa, дообученную на intfloat/multilingual-e5-large-instruct для обнаружения персональных и чувствительных данных в тексте. Она размечает 54 типа сущностей, включая имена, адреса, номера социального страхования и медицинских записей, контактные, финансовые, медицинские и сетевые идентификаторы. Модель предназначена для поиска и последующего удаления или маскирования чувствительной информации в клинических записях, медицинских документах и наборах данных, а также для аудита документов и поддержки процессов защиты конфиденциальности. В README сообщается о micro-F1 0,9582 на тестовой выборке из 2 000 примеров датасета NVIDIA Nemotron-PII. Модель принимает текст и возвращает метки сущностей для его токенов; контекст — до 514 токенов. Основной язык обучения и применения — английский, хотя базовая модель многоязычная. Модель может пропускать чувствительные данные, а качество зависит от предметной области; для некоторых категорий точность ниже. README рекомендует использовать её как вспомогательный инструмент с проверкой результатов человеком. Лицензия — Apache-2.0.

7.4K0янв. 2026ctx514
textapache-2.0hugging-face
OpenMed
OpenMed-PII-Portuguese-BigMed-Large-560M-v1

OpenMed разработала OpenMed-PII-Portuguese-BigMed-Large-560M-v1 — модель на базе XLM-RoBERTa Large, дообученную для поиска и классификации персональных данных в португальском тексте. Она размечает токены BIO-тегами и распознаёт 54 типа чувствительных сущностей, включая имена, адреса, идентификаторы, контактные, финансовые и медицинские сведения. Число параметров по метаданным — 658,7 млн, максимальная длина контекста — 514 токенов. Модель предназначена для выявления PII в медицинских записях и документах, автоматизированного обезличивания, проверки коллекций документов и подготовки данных к исследованиям. В README приведён результат micro F1 0,8848 на португальском тестовом наборе AI4Privacy и синтетических данных; заявлены примеры с бразильскими форматами, включая CPF, телефоны с кодом +55 и валюту R$. Модель оптимизирована для португальского и может хуже работать на других языках или специализированной терминологии; пропуски чувствительных данных требуют проверки человеком. Лицензия — Apache-2.0.

1790апр. 2026ctx514
textapache-2.0hugging-face
OpenMed
OpenMed-PII-Portuguese-SuperClinical-Large-434M-v1

OpenMed-PII-Portuguese-SuperClinical-Large-434M-v1 — модель OpenMed для выявления и классификации персональных данных в текстах на португальском языке. Это дообученная на Microsoft DeBERTa-v3-large модель токеновой классификации на базе DeBERTa V2 с 533,8 млн параметров и контекстом до 512 токенов. Модель размечает 54 типа чувствительных сущностей, включая имена, адреса, идентификаторы, контактные, финансовые и медицинские сведения. Она предназначена для поиска и удаления PII в клинических записях и документах, подготовки данных к исследованиям и поддержки аудита конфиденциальности. По README, на португальском тестовом наборе она достигла micro F1 0,8889. Модель оптимизирована для португальского и может хуже работать на других языках или с узкоспециальной терминологией. README рекомендует использовать её как вспомогательный инструмент и проверять результаты человеком, поскольку возможны пропуски чувствительных данных. Лицензия — Apache-2.0.

1061апр. 2026ctx512
textapache-2.0hugging-face
OpenMed
OpenMed-PII-Spanish-SnowflakeMed-Large-568M-v1

OpenMed разработала OpenMed-PII-Spanish-SnowflakeMed-Large-568M-v1 — модель токеновой классификации на базе XLM-RoBERTa, дообученную для поиска и классификации 54 типов персональных и чувствительных данных в испанском тексте. Она насчитывает 658,7 млн параметров, принимает текст и возвращает метки сущностей с позициями в тексте; контекст — до 8194 токенов. Модель предназначена для выявления имён, адресов, идентификаторов, контактных, медицинских и финансовых сведений в клинических записях и документах. Её можно применять для предварительного обезличивания данных, подготовки наборов для исследований и аудита документов. В README сообщается о результате micro-F1 0,9495 на испанской части AI4Privacy; это не гарантирует такую же точность на других данных. Для лучшей работы авторы рекомендуют удалять диакритические знаки из входного текста; смещения найденных сущностей можно сопоставить с исходным текстом. Возможны пропуски чувствительных данных, а качество зависит от предметной области; критические результаты требуют проверки человеком. Модель опубликована под лицензией Apache-2.0.

441февр. 2026ctx8.2K
textapache-2.0hugging-face
OpenMed
OpenMed-PII-SuperMedical-Base-125M-v1

OpenMed-PII-SuperMedical-Base-125M-v1 — англоязычная модель OpenMed для обнаружения и классификации персональных и медицинских идентификаторов в тексте. Это дообученная для токенной классификации RoBERTa-base с 151,8 млн параметров и контекстом до 514 токенов; модель распространяется в формате Safetensors и предназначена для запуска через Transformers. Модель размечает 54 типа чувствительных сущностей, включая имена, адреса, номера социального страхования и медицинских записей, контактные и финансовые данные. Она подходит для обезличивания клинических заметок и документов, подготовки наборов данных и поиска чувствительной информации при аудите. В README приведён результат micro F1 0,9557 на тестовой выборке из NVIDIA Nemotron-PII; качество различается между типами сущностей. Модель рассчитана прежде всего на английский текст. Некоторые категории могут распознаваться хуже, а пропуски чувствительных данных возможны, поэтому для важных сценариев нужна проверка человеком. Лицензия — Apache 2.0.

13K0янв. 2026ctx514
textapache-2.0hugging-face
OpenMed
OpenMed-ZeroShot-NER-BloodCancer-Base-220M

OpenMed-ZeroShot-NER-BloodCancer-Base-220M — модель OpenMed для распознавания именованных сущностей в медицинских и биомедицинских текстах, особенно в материалах о хроническом лимфоцитарном лейкозе (ХЛЛ). Она построена на архитектуре GLiNER и дообучена на специализированном корпусе CLL. Модель принимает текст и возвращает найденные сущности с метками; zero-shot режим позволяет задавать типы сущностей при запросе без отдельного дообучения под каждую метку. Модель предназначена для извлечения терминов о заболеваниях, биомаркерах, генах, белках, методах лечения и клинических наблюдениях из медицинских записей и научной литературы. В карточке указана оценка F1 0,67 на тестовом наборе CLL и улучшение на 3,2% относительно базовой модели. Заявления карточки о высокой точности и готовности к производству следует оценивать с учётом этой метрики и проверять на данных конкретного применения. Репозиторий содержит веса PyTorch, а лицензия — Apache-2.0. Карточка не сообщает базовую модель, число параметров или длину контекста, поэтому эти характеристики не приводятся.

22K0сент. 2025
textapache-2.0hugging-face
OpenMed
OpenMed-ZeroShot-NER-Pharma-Large-459M

OpenMed/OpenMed-ZeroShot-NER-Pharma-Large-459M — разработанная OpenMed модель GLiNER для извлечения упоминаний химических веществ в биомедицинских текстах. Она дообучена на BC5CDR-Chem и предназначена прежде всего для распознавания лекарственных соединений и терапевтических веществ; карточка указывает 459 млн параметров в названии модели. Модель поддерживает zero-shot NER: типы сущностей можно задавать при использовании без отдельного дообучения, хотя основной указанный тип — CHE. Модель подходит для поиска химических соединений в аннотациях PubMed и медицинских текстах, подготовки данных для фармаконадзора, анализа нежелательных реакций и последующего извлечения связей «химическое вещество — заболевание». В описании заявлен F1 0,9542 на тестовой части BC5CDR-Chem, исключённой из обучения. Для пользовательских типов сущностей качество может варьироваться; карточка советует экспериментировать с порогом обнаружения. Модель принимает текст и выдаёт разметку сущностей. Поддержка по карточке указана для английского языка. Лицензия — Apache-2.0.

28K2сент. 2025
textapache-2.0hugging-face
Hasanblanka
polygraf-ner-stage4-final-model

Polygraf NER Stage 4 Final Model — англоязычная модель распознавания именованных сущностей, созданная для технического задания Polygraf Applied NLP. Она дообучена Hasanblanka на DistilBERT и размечает последовательность токенов BIO-тегами для восьми типов сущностей: людей, организаций, мест, дат и времени, продуктов, произведений искусства, профессий и денежных или количественных значений. Модель построена на DistilBertForTokenClassification и содержит около 65,2 млн параметров. Она обучалась на 1 954 примерах обучающей выборки; тестовая выборка включает 472 записи. В README приведён F1 сущностей 0,7554 на объединённом тесте и 0,8222 на диагностической выборке из 10 вручную размеченных примеров. Модель рассчитана на английские тексты, в частности новости; базовый контекст DistilBERT — 512 токенов. Указанная лицензия — other. Модель подходит для извлечения сущностей из текста, но автор прямо предупреждает, что она не предназначена для производственного использования. Она не поддерживает вложенные сущности; распознавание произведений искусства остаётся слабым, а результаты для людей и организаций обобщаются хуже, чем для временных и количественных сущностей. Разрыв между обучающей и тестовой оценками также указывает на ограничения обобщения.

80июль 2026ctx512
textotherhugging-face
angel-gitt
privacy-filter-gbai

Privacy Filter ES M1 — модель для выявления и разметки персональных данных в испанском тексте. Она разработана на основе OpenMed/privacy-filter-multilingual-v2: неизменённый трансформерный MoE-бэкбон с токенизатором и 1,4 млрд параметров использует дообученную классификационную голову Linear(640→217); всего в репозитории указано 145,4 млн параметров. Модель принимает текст и присваивает токенам метки BIOES для последующего извлечения чувствительных фрагментов. Модель ориентирована на деидентификацию испанских клинических документов и может применяться для поиска персональных данных в других испаноязычных текстах, включая юридические документы. Голова обучалась с замороженным бэкбоном на примерах MEDDOCAN и синтетических данных; README приводит результаты оценки на клиническом наборе MEDDOCAN, небольшом юридическом наборе и английском наборе вне распределения. Для декодирования с ограничениями BIOES/Viterbi предлагается использовать runtime OpenMed. Это исследовательский прототип, а не гарантия полного обезличивания или соблюдения законодательства: возможны пропуски, ложные срабатывания и ошибки границ или категорий фрагментов. После адаптации к испанскому немного снизился символьный F1 на английском наборе вне распределения; для важных сценариев нужны проверка на целевых данных и экспертный контроль. Модель распространяется по лицензии Apache-2.0.

2530сент. 2026ctx131.1K
textapache-2.0hugging-face
syssec-utd
py312-pylingual-v1-segmenter

py312-pylingual-v1-segmenter — модель SysSec-UTD для сегментации текста с помощью классификации токенов. Это дообученная на наборе syssec-utd/segmentation-py312-pylingual-v1-tokenized модель syssec-utd/py312-pylingual-v1-mlm; архитектура основана на RoBERTa и содержит 136,3 млн параметров. Модель принимает текст и присваивает метки отдельным токенам, чтобы выделять сегменты текста. В README приведены результаты оценки: F1 0,9929, точность 0,9982, precision 0,9923 и recall 0,9935. Контекст составляет до 514 токенов. Карточка не раскрывает языки сегментации и подробности схемы меток, поэтому применение следует ограничивать сегментацией, соответствующей обучающим данным. Файлы представлены в формате safetensors; используется библиотека Transformers. Лицензия в предоставленных данных не указана.

11K0февр. 2025ctx514
texthugging-face
Nishant1600
qwen3-1_7b-scl-extractor

Qwen3-1.7B SCL Extractor — языковая модель, дообученная на базе Qwen/Qwen3-1.7B для извлечения структурированных фактов из описаний производственных происшествий. Она формирует один JSON-объект с типом и величиной энергии, единицей измерения, степенью травмы и дословными фрагментами исходного текста в качестве подтверждений. Модель предназначена для серверной обработки сообщений о происшествиях в конвейере контроля безопасности; пороговую классификацию уровня опасности выполняет отдельный код. Модель использует плотную архитектуру Qwen3 с 1,7 млрд параметров и контекстом до 40 960 токенов. Она принимает текст и выдаёт текст в формате JSON. Дообучение выполнено методом QLoRA на примерно 30 тысячах отчётов OSHA о тяжёлых травмах за 2015–2025 годы. Модель рассчитана на англоязычные описания в стиле американских отчётов об инцидентах в нефтегазовой и промышленной сферах. Результаты требуют учёта смещения обучающих данных: степень травмы может чаще определяться как серьёзная, поскольку обучающая выборка содержит преимущественно тяжёлые случаи. Модель не выносит итоговую классификацию безопасности и не заменяет профессиональную оценку. Лицензия — Apache-2.0.

640авг. 2026ctx41K
textapache-2.0hugging-face
AXERA-TECH
Qwen3-VL-2B-Instruct-GPTQ-Int4

AXERA-TECH 提供的 Qwen3-VL-2B-Instruct-GPTQ-Int4 是面向 AXera AX650 NPU 的视觉но-языковая модель, конвертированная с квантизацией w4a16. Она принимает изображения и видео для анализа с текстовым ответом; карточка приводит результаты обработки одного изображения и восьми видеокадров на AX650, а также требования к памяти и скорость генерации. Репозиторий заявляет совместимость с Pulsar2 5.0 и запуск через axllm, в том числе с OpenAI-совместимым интерфейсом. Модель основана на Qwen3-VL и рассчитана на локальный запуск на поддерживаемых устройствах AXera. Лицензия — MIT.

951окт. 2025
textimagemithugging-face
KoichiYasuoka
rinna-gpt2-medium-japanese-ud-causal

Koichi Yasuoka разработал японскую модель GPT-2 для морфосинтаксического анализа текста. Она дообучена на базе rinna/japanese-gpt2-medium на UD_Japanese-GSDLUW и предназначена для определения частей речи и зависимостей между словами. Модель работает с японским текстом, использует архитектуру GPT-2 и имеет контекст длиной 1024 токена. Лицензия — MIT.

1430сент. 2024ctx1K
textmithugging-face
gyr66
RoBERTa-ext-large-chinese-finetuned-ner

gyr66/RoBERTa-ext-large-chinese-finetuned-ner — китайская модель разметки токенов, дообученная автором на наборе данных gyr66/privacy_detection. Она предназначена для выявления и классификации фрагментов, связанных с конфиденциальностью, в китайском тексте. Модель основана на архитектуре BERT, содержит 424,3 млн параметров и обрабатывает последовательности длиной до 512 токенов. На оценочном наборе данных указаны F1 0,7318, точность 0,7052 и полнота 0,7606. Эти показатели отражают результаты только на упомянутом наборе данных; карточка не уточняет конкурсную задачу или классы разметки. Модель опубликована в формате PyTorch. Сведения о лицензии в предоставленных источниках отсутствуют.

130окт. 2023ctx512
texthugging-face
fran-martinez
scibert_scivocab_cased_ner_jnlpba

fran-martinez/scibert_scivocab_cased_ner_jnlpba — модель распознавания именованных сущностей на основе SciBERT, разработанного Allen Institute for AI и дообученного для задачи BioNLP/JNLPBA. SciBERT построен на архитектуре BERT и предварительно обучен на корпусе научных публикаций Semantic Scholar; для него используется специализированный словарь scivocab. Модель содержит 137,1 млн параметров и принимает последовательности длиной до 512 токенов. Модель размечает слова и фрагменты текста в научных аннотациях, выделяя, в частности, белки, типы клеток и клеточные линии. В описанной оценке на данных JNLPBA она достигла макро F1 0,7498 на уровне сущностей и F1 0,8093 на уровне слов. Для обучения использовались 2 000 аннотаций PubMed; оценка проводилась на 404 аннотациях. Модель предназначена для извлечения биомедицинских сущностей из научных текстов. В README отмечено, что результаты ниже приведённого показателя исходной работы Allen Institute for AI; одним из возможных объяснений называется отсутствие слоя CRF. Лицензия в предоставленных данных не указана.

250март 2022ctx512
texthugging-face
cyttic
trocr-webfonts7

cyttic/trocr-webfonts7 — дообученная модель cyttic/exp2-frozen-benyehuda-cont на неизвестном наборе данных. Это модель архитектуры vision-encoder-decoder, предназначенная для преобразования изображения в текст; карточка сообщает о CER 0,0216 и WER 0,0611 на оценочном наборе. Модель подходит для распознавания текста на изображениях, в частности текста веб-шрифтов, что отражено в её названии. Данные не раскрывают поддерживаемые языки, длину контекста или подробные условия применения. Весы опубликованы в формате safetensors; библиотека — Transformers. Лицензия в предоставленных данных не указана.

150сент. 2026ctx512
textimagehugging-face
dccuchile
tulio-chilean-spanish-bert

Tulio Chilean Spanish BERT — модель BERT для чилийского варианта испанского языка, разработанная Хорхе Ортисом Фуэнтесом. Это дообученная версия dccuchile/bert-base-spanish-wwm-cased; в карточке указаны архитектура BertForMaskedLM, 137,1 млн параметров и контекст до 512 токенов. Модель обучалась на чилийских новостях, веб-текстах, жалобах, твитах и книгах на испанском языке. Она предназначена для предсказания замаскированных слов и может служить основой для задач классификации и разметки текста на чилийском испанском; автор сообщает о сравнительных результатах на таких задачах. Доступна в формате safetensors. Лицензия указана как CC BY 4.0, однако автор предупреждает, что совместимость лицензий всех обучающих данных, особенно для коммерческого использования, не подтверждена. Данные не проходили цензуру, поэтому модель может воспроизводить нежелательные идеологические представления.

64913июль 2023ctx512
textcc-by-4.0hugging-face
tner
xlm-roberta-large-uncased-bc5cdr

Это модель XLM-RoBERTa Large, дообученная командой TNER для распознавания именованных сущностей в биомедицинских текстах набора BC5CDR. Она выполняет токен-классификацию: принимает текст и помечает в нём сущности, связанные с заболеваниями и химическими соединениями. Модель подходит для извлечения таких упоминаний из научных публикаций и других биомедицинских документов. Модель основана на архитектуре XLM-RoBERTa и содержит около 658,7 млн параметров. Максимальная длина контекста — 514 токенов; доступен формат PyTorch. Карточка рекомендует загружать токенизатор из репозитория asahi417/tner-xlm-roberta-large-uncased-bc5cdr. Лицензия в предоставленных данных не указана.

2770март 2022ctx514
texthugging-face

Задачи профессии

18 задач
37Извлечение имён, организаций, мест, дат, сумм, идентификаторов и других сущностей. — AI разбирает неструктурированный источник на элементы и связывает каждое извлечённое значение с местом его происхождения. К исходным данным относятся журналы, сообщения, разнородные записи и неструктурированный текст. Формат результата: структурированные данные, полученные в рамках «Извлечение имён, организаций, мест, дат, сумм, идентификаторов и других сущностей», с нормализованными значениями и ссылками на исходные фрагменты. Надёжность оценивают посимвольной или пополевой сверкой с оригиналом и проверкой обязательных полей; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
38Извлечение отношений между сущностями. — Для этой задачи система выделяет сущности, числа и отношения, нормализует формат и формирует машиночитаемую запись. Рабочие входы: сообщения, разнородные записи, неструктурированный текст и таблицы. Формат результата: структурированные данные, полученные в рамках «Извлечение отношений между сущностями», с нормализованными значениями и ссылками на исходные фрагменты. Критерии приёмки: посимвольной или пополевой сверкой с оригиналом и проверкой обязательных полей; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
39Извлечение событий, их участников, времени, места и результата. — Практическая реализация: AI находит нужные фрагменты в исходном материале, распознаёт их роль и переносит в заданные структурированные поля. Входной контекст включает разнородные записи, неструктурированный текст, таблицы и журналы. Формат результата: структурированные данные, полученные в рамках «Извлечение событий, их участников, времени, места и результата», с нормализованными значениями и ссылками на исходные фрагменты. Ошибки выявляют посимвольной или пополевой сверкой с оригиналом и проверкой обязательных полей; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
40Извлечение обязательств, требований, условий, исключений и сроков. — Механизм: AI разбирает неструктурированный источник на элементы и связывает каждое извлечённое значение с местом его происхождения. Исходные данные: неструктурированный текст, таблицы, журналы и сообщения. Формат результата: структурированные данные, полученные в рамках «Извлечение обязательств, требований, условий, исключений и сроков», с нормализованными значениями и ссылками на исходные фрагменты. Проверка: посимвольной или пополевой сверкой с оригиналом и проверкой обязательных полей; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
41Извлечение числовых показателей и единиц измерения. — AI выделяет сущности, числа и отношения, нормализует формат и формирует машиночитаемую запись. К исходным данным относятся таблицы, журналы, сообщения и разнородные записи. Формат результата: структурированные данные, полученные в рамках «Извлечение числовых показателей и единиц измерения», с нормализованными значениями и ссылками на исходные фрагменты. Надёжность оценивают посимвольной или пополевой сверкой с оригиналом и проверкой обязательных полей; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
42Извлечение таблиц, списков и иерархий из неструктурированного контента. — Для этой задачи система находит нужные фрагменты в исходном материале, распознаёт их роль и переносит в заданные структурированные поля. Предметная логика: восстанавливает визуальную и логическую структуру, связывая ячейки, заголовки и подписи. Рабочие входы: геометрия страницы, журналы, сообщения, разнородные записи и неструктурированный текст. Формат результата: структурированные данные, полученные в рамках «Извлечение таблиц, списков и иерархий из неструктурированного контента», с нормализованными значениями и ссылками на исходные фрагменты. Критерии приёмки: посимвольной или пополевой сверкой с оригиналом и проверкой обязательных полей; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
43Преобразование свободного текста в JSON, XML, CSV или другую заданную схему. — Практическая реализация: AI сначала определяет элементы, которые должны сохраниться, затем перестраивает форму представления и отмечает внесённые изменения. Входной контекст включает сообщения, разнородные записи, неструктурированный текст и таблицы. Формат результата: преобразованный материал по задаче «Преобразование свободного текста в JSON, XML, CSV или другую заданную схему» с сохранённым содержанием и журналом значимых изменений. Ошибки выявляют сравнением смысла и структуры до и после преобразования, а также поиском потерянных элементов; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
44Нормализация дат, адресов, телефонов, валют и единиц измерения. — Механизм: AI переводит объект в новый формат или вид, контролируя потери информации и нежелательные артефакты. Исходные данные: разнородные записи, неструктурированный текст, таблицы и журналы. Формат результата: преобразованный материал по задаче «Нормализация дат, адресов, телефонов, валют и единиц измерения» с сохранённым содержанием и журналом значимых изменений. Проверка: сравнением смысла и структуры до и после преобразования, а также поиском потерянных элементов; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
45Сопоставление разных написаний одной и той же сущности. — AI нормализует сравниваемые объекты, выравнивает их по общим признакам и показывает совпадения, различия и связи. К исходным данным относятся неструктурированный текст, таблицы, журналы и сообщения. Формат результата: карта соответствий и различий для «Сопоставление разных написаний одной и той же сущности», где элементы приведены к единым критериям и связаны с первичными данными. Надёжность оценивают экспертной сверкой соответствий и проверкой, что различия не вызваны несовместимыми форматами; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
46Разрешение неоднозначных упоминаний и местоименных ссылок. — Для этой задачи система строит единое пространство признаков и устанавливает соответствия между элементами, которые описаны по-разному. Рабочие входы: таблицы, журналы, сообщения и разнородные записи. Формат результата: карта соответствий и различий для «Разрешение неоднозначных упоминаний и местоименных ссылок», где элементы приведены к единым критериям и связаны с первичными данными. Критерии приёмки: экспертной сверкой соответствий и проверкой, что различия не вызваны несовместимыми форматами; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
47Автоматическое присвоение метаданных, тегов и ключевых слов. — Практическая реализация: AI строит границы между категориями и ранжирует объекты так, чтобы наиболее важные или срочные обрабатывались раньше. Входной контекст включает журналы, сообщения, разнородные записи и неструктурированный текст. Формат результата: результат «Автоматическое присвоение метаданных, тегов и ключевых слов» в виде метки, класса, ранга или тематического слоя с уверенностью и объясняющими признаками. Ошибки выявляют по матрице ошибок, калибровке уверенности и отдельному анализу пограничных классов; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
48Построение таксономии по коллекции материалов. — Механизм: AI создаёт вычислительное представление объекта или процесса и проигрывает на нём альтернативные сценарии. Исходные данные: сообщения, разнородные записи, неструктурированный текст и таблицы. Формат результата: вычислительная модель или карта для «Построение таксономии по коллекции материалов» с результатами сценариев и анализом чувствительности. Проверка: сопоставлением с наблюдениями, тестами чувствительности и воспроизводимостью вычислений; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
49Построение онтологии или графа знаний. — AI восстанавливает скрытые связи между параметрами и использует модель для виртуальных экспериментов. К исходным данным относятся разнородные записи, неструктурированный текст, таблицы и журналы. Формат результата: вычислительная модель или карта для «Построение онтологии или графа знаний» с результатами сценариев и анализом чувствительности. Надёжность оценивают сопоставлением с наблюдениями, тестами чувствительности и воспроизводимостью вычислений; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
50Выделение тем и под-тем в больших массивах текста. — Для этой задачи система выделяет сущности, числа и отношения, нормализует формат и формирует машиночитаемую запись. Рабочие входы: неструктурированный текст, таблицы, журналы и сообщения. Формат результата: структурированные данные, полученные в рамках «Выделение тем и под-тем в больших массивах текста», с нормализованными значениями и ссылками на исходные фрагменты. Критерии приёмки: посимвольной или пополевой сверкой с оригиналом и проверкой обязательных полей; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
51Кластеризация материалов по смысловой близости. — Практическая реализация: AI извлекает признаки, относит каждый объект к подходящей категории или уровню приоритета и оценивает уверенность. Предметная логика: сопоставляет не только одинаковые слова, но и намерение, контекст и близкие понятия. Входной контекст включает текст запроса, таблицы, журналы, сообщения и разнородные записи. Формат результата: результат «Кластеризация материалов по смысловой близости» в виде метки, класса, ранга или тематического слоя с уверенностью и объясняющими признаками. Ошибки выявляют по матрице ошибок, калибровке уверенности и отдельному анализу пограничных классов; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
52Обнаружение точных и смысловых дублей. — Механизм: AI анализирует поток наблюдений и локализует признаки, которые отличают целевой объект или нарушение от обычного состояния. Предметная логика: сопоставляет не только одинаковые слова, но и намерение, контекст и близкие понятия. Исходные данные: текст запроса, журналы, сообщения, разнородные записи и неструктурированный текст. Формат результата: перечень объектов, событий или отклонений, относящихся к «Обнаружение точных и смысловых дублей», с локализацией, уверенностью и признаками срабатывания. Проверка: по полноте обнаружения, доле ложных срабатываний и качеству локализации на независимой выборке; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
53Сопоставление полей между несовместимыми схемами данных. — AI сопоставляет объекты по одинаковым критериям и отделяет содержательные различия от различий формата или терминологии. К исходным данным относятся сообщения, разнородные записи, неструктурированный текст и таблицы. Формат результата: карта соответствий и различий для «Сопоставление полей между несовместимыми схемами данных», где элементы приведены к единым критериям и связаны с первичными данными. Надёжность оценивают экспертной сверкой соответствий и проверкой, что различия не вызваны несовместимыми форматами; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику.
54Восстановление недостающей структуры у плохо оформленных данных. — Для этой задачи система преобразует исходный материал по заданным правилам, сохраняя смысл, структуру и критически важные детали. Рабочие входы: разнородные записи, неструктурированный текст, таблицы и журналы. Формат результата: преобразованный материал по задаче «Восстановление недостающей структуры у плохо оформленных данных» с сохранённым содержанием и журналом значимых изменений. Критерии приёмки: сравнением смысла и структуры до и после преобразования, а также поиском потерянных элементов; по точности полей, полноте извлечения, согласованности схемы и привязке к первоисточнику. <a id="section-i-4"></a>

0 моделей