/ Модель

Характеристики

Контекст
8 192 токена
Параметры
395 млн
Лицензия
Apache 2.0
Архитектура
modernbert · dense
Базовая модель
ModernBERT-large
Библиотека
transformers
Опубликована
13 янв 2026

OpenMed-PII-ModernMed-Large-395M-v1

Разметка токеновТекст → label4 профессии

Англоязычная модель OpenMed на базе ModernBERT-large выявляет и классифицирует чувствительные персональные данные в тексте для деидентификации и аудита конфиденциальности.

11 482скачиваний за 30 дней2лайкавеса обновлены13 янв 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

OpenMed-PII-ModernMed-Large-395M-v1 — англоязычная модель OpenMed для обнаружения и классификации персональных и других чувствительных данных в тексте. Это дообученный энкодер ModernBERT-large с архитектурой ModernBertForTokenClassification, примерно 394,7 млн параметров и контекстом до 8192 токенов. Модель размечает 54 типа сущностей, включая имена, адреса, идентификаторы, контактные и медицинские сведения; она обучена на NVIDIA Nemotron-PII и доступна в формате safetensors для библиотеки Transformers.

Модель предназначена для выявления и удаления чувствительных данных из клинических записей, документов и наборов данных, а также для поддержки аудита конфиденциальности. В README сообщается о micro-F1 0,9579 на тестовой выборке из 2000 примеров. Модель рассчитана прежде всего на английский текст; качество зависит от категории сущностей и предметной области, а некоторые сведения она может пропустить. Авторы рекомендуют использовать её как вспомогательный инструмент с проверкой человеком. Лицензия — Apache-2.0.

Сценарии применения

  • поиск персональных данных в клинических записях
  • разметка медицинских идентификаторов в документах
  • удаление контактных и финансовых данных из текстов
  • проверка наборов данных перед использованием в исследованиях
  • аудит коллекций документов на наличие чувствительной информации

Ограничения

Модель обучена преимущественно на английском тексте, может пропускать отдельные персональные данные, а качество различается между типами сущностей и предметными областями. Для критически важных сценариев необходима проверка человеком.

Для каких профессий подходит4

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

OpenMed-PII-ModernMed-Large-395M-v1

PII Detection Model | 395M Parameters | Open Source

F1 Score Precision Recall

Model Description

OpenMed-PII-ModernMed-Large-395M-v1 is a transformer-based token classification model fine-tuned for Personally Identifiable Information (PII) detection in text. This model identifies and classifies 54 types of sensitive information including names, addresses, SSNs, medical record numbers, and more.

Key Features

  • High Accuracy: Achieves strong F1 scores across diverse PII categories
  • Comprehensive Coverage: Detects 50+ entity types spanning personal, financial, medical, and contact information
  • Privacy-Focused: Designed for de-identification and compliance with HIPAA, GDPR, and other privacy regulations
  • Production-Ready: Optimized for real-world text processing pipelines

Performance

Evaluated on a stratified 2,000-sample test set from NVIDIA Nemotron-PII:

MetricScore
Micro F10.9579
Precision0.9639
Recall0.9520
Macro F10.9627
Weighted F10.9567
Accuracy0.9942

Top 10 PII Models

RankModelF1PrecisionRecall
1OpenMed-PII-SuperClinical-Large-434M-v10.96080.96850.9532
2OpenMed-PII-BigMed-Large-560M-v10.96040.96440.9565
3OpenMed-PII-EuroMed-210M-v10.96000.96810.9521
4OpenMed-PII-SnowflakeMed-568M-v10.95940.96400.9548
5OpenMed-PII-SuperMedical-Large-355M-v10.95920.96320.9553
6OpenMed-PII-ClinicalBGE-568M-v10.95870.96360.9538
7OpenMed-PII-mClinicalE5-Large-560M-v10.95820.96310.9533
8OpenMed-PII-ModernMed-Large-395M-v10.95790.96390.9520
9OpenMed-PII-BioClinicalModern-Large-395M-v10.95790.96560.9502
10OpenMed-PII-ClinicalE5-Large-335M-v10.95770.96040.9550

Best Performing Entities

EntityF1PrecisionRecallSupport
bank_routing_number1.0001.0001.000128
cvv1.0001.0001.00092
tax_id1.0001.0001.00041
medical_record_number0.9980.9961.000262
credit_debit_card0.9980.9951.000213

Challenging Entities

These entity types have lower performance and may benefit from additional post-processing:

EntityF1PrecisionRecallSupport
unique_id0.9230.9350.91179
language0.9111.0000.836201
education_level0.9030.9550.857196
time0.8450.8540.837460
occupation0.6590.7210.606688

Supported Entity Types

This model detects 54 PII entity types organized into categories:

EntityDescription
account_numberAccount Number
api_keyApi Key
bank_routing_numberBank Routing Number
certificate_license_numberCertificate License Number
credit_debit_cardCredit Debit Card
cvvCvv
employee_idEmployee Id
health_plan_beneficiary_numberHealth Plan Beneficiary Number
mac_addressMac Address
medical_record_numberMedical Record Number
...and 6 more
EntityDescription
ageAge
biometric_identifierBiometric Identifier
blood_typeBlood Type
date_of_birthDate Of Birth
education_levelEducation Level
first_nameFirst Name
last_nameLast Name
genderGender
languageLanguage
occupationOccupation
...and 4 more
EntityDescription
emailEmail
phone_numberPhone Number
fax_numberFax Number
urlUrl
EntityDescription
cityCity
coordinateCoordinate
countryCountry
countyCounty
stateState
street_addressStreet Address
EntityDescription
device_identifierDevice Identifier
ipv4Ipv4
ipv6Ipv6
EntityDescription
dateDate
date_timeDate Time
timeTime
EntityDescription
company_nameCompany Name

Usage

Quick Start

from transformers import pipeline

# Load the PII detection pipeline
ner = pipeline("ner", model="openmed/OpenMed-PII-ModernMed-Large-395M-v1", aggregation_strategy="simple")

text = """
Patient John Smith (DOB: 03/15/1985, SSN: 123-45-6789) was seen today.
Contact: john.smith@email.com, Phone: (555) 123-4567.
Address: 456 Oak Street, Boston, MA 02108.
"""

entities = ner(text)
for entity in entities:
    print(f"{entity['entity_group']}: {entity['word']} (score: {entity['score']:.3f})")

De-identification Example

def redact_pii(text, entities, placeholder='[REDACTED]'):
    """Replace detected PII with placeholders."""
    # Sort entities by start position (descending) to preserve offsets
    sorted_entities = sorted(entities, key=lambda x: x['start'], reverse=True)
    redacted = text
    for ent in sorted_entities:
        redacted = redacted[:ent['start']] + f"[{ent['entity_group']}]" + redacted[ent['end']:]
    return redacted

# Apply de-identification
redacted_text = redact_pii(text, entities)
print(redacted_text)

Batch Processing

from transformers import AutoModelForTokenClassification, AutoTokenizer
import torch

model_name = "openmed/OpenMed-PII-ModernMed-Large-395M-v1"
model = AutoModelForTokenClassification.from_pretrained(model_name)
tokenizer = AutoTokenizer.from_pretrained(model_name)

texts = [
    "Contact Dr. Jane Doe at jane.doe@hospital.org",
    "Patient SSN: 987-65-4321, MRN: 12345678",
]

inputs = tokenizer(texts, return_tensors='pt', padding=True, truncation=True)
with torch.no_grad():
    outputs = model(**inputs)
    predictions = torch.argmax(outputs.logits, dim=-1)

Training Details

Dataset

  • Source: NVIDIA Nemotron-PII
  • Format: BIO-tagged token classification
  • Labels: 106 total (53 entity types × 2 BIO tags + O)
  • Splits: 50K train / 5K validation / 45K test

Training Configuration

  • Max Sequence Length: 384 tokens
  • Label Strategy: First token only (label_all_tokens=False)
  • Framework: Hugging Face Transformers + Trainer API

Intended Use & Limitations

Intended Use

  • De-identification: Automated redaction of PII in clinical notes, medical records, and documents
  • Compliance: Supporting HIPAA, GDPR, and privacy regulation compliance
  • Data Preprocessing: Preparing datasets for research by removing sensitive information
  • Audit Support: Identifying PII in document collections

Limitations

⚠️ Important: This model is intended as an assistive tool, not a replacement for human review.

  • False Negatives: Some PII may not be detected; always verify critical applications
  • Context Sensitivity: Performance may vary with domain-specific terminology
  • Challenging Categories: occupation, time, and sexuality have lower F1 scores
  • Language: Primarily trained on English text

Citation

@misc{openmed-pii-2026,
  title = {OpenMed-PII-ModernMed-Large-395M-v1: PII Detection Model},
  author = {OpenMed Science},
  year = {2026},
  publisher = {Hugging Face},
  url = {https://huggingface.co/openmed/OpenMed-PII-ModernMed-Large-395M-v1}
}

Links

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers · token-classification

Можно запустить

Подбираем GPU…

Класс архитектуры
ModernBertForTokenClassification
Ревизия весов
5d089e8

0 моделей