/ Модель

Характеристики

Контекст
512 токенов
Параметры
152 млн
Лицензия
MIT
Архитектура
deberta · dense
Опубликована
6 окт 2023

deberta_finetuned_pii

Разметка токеновТекст → label7 профессий

Дообученная модель DeBERTa для обнаружения и классификации персональных данных в неструктурированном тексте.

2 238скачиваний за 30 дней59лайковвеса обновлены8 мар 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

lakshyakh93/deberta_finetuned_pii — дообученная модель на базе DeBERTa для поиска и классификации персональных данных в неструктурированном тексте. Она размечает фрагменты вроде имён учётных записей, номеров банковских карт, адресов электронной почты, телефонных номеров и адресов.

Модель предназначена для выявления чувствительных сведений в документах, письмах и пользовательском контенте, например перед передачей текста на дальнейшую обработку или проверкой данных на конфиденциальность. Это модель классификации токенов на 151,8 млн параметров с контекстом до 512 токенов; для запуска README показывает использование Transformers pipeline с задачей token-classification.

Модель принимает текст и выдаёт метки для фрагментов текста. В карточке указана лицензия MIT. Оценки качества и подробности о составе обучающих данных не приведены, поэтому результаты на конкретных категориях PII следует проверять на целевых данных.

Сценарии применения

  • Поиск адресов электронной почты в документах
  • Выявление телефонных номеров в письмах
  • Обнаружение номеров банковских карт в тексте
  • Разметка имён и адресов в пользовательских сообщениях
  • Проверка текстов на наличие персональных данных перед обработкой

Ограничения

Контекст ограничен 512 токенами. В README не приведены метрики качества и подробное описание обучающих данных; точность на целевых категориях следует оценивать отдельно.

Для каких профессий подходит7

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

A finetuned model designed to recognize and classify Personally Identifiable Information (PII) within unstructured text data. This powerful model accurately identifies a wide range of PII categories, such as account names, credit card numbers, emails, phone numbers, and addresses. The model is specifically trained to detect various PII types, including but not limited to:

| Category               | Data                                                                                   |
|------------------------|----------------------------------------------------------------------------------------|
| Account-related information | Account name, account number, and transaction amounts                             |
| Banking details        | BIC, IBAN, and Bitcoin or Ethereum addresses                                           |
| Personal information   | Full name, first name, middle name, last name, gender, and date of birth               |
| Contact information    | Email, phone number, and street address (including building number, city, county, state, and zip code) |
| Job-related data       | Job title, job area, job descriptor, and job type                                      |
| Financial data         | Credit card number, issuer, CVV, and currency information (code, name, and symbol)     |
| Digital identifiers    | IP addresses (IPv4 and IPv6), MAC addresses, and user agents                           |
| Online presence        | URL, usernames, and passwords                                                          |
| Other sensitive data   | SSN, vehicle VIN and VRM, phone IMEI, and nearby GPS coordinates                       |

The PII Identifier Model ensures data privacy and compliance by effectively detecting and categorizing sensitive information within documents, emails, user-generated content, and more. Make your data processing safer and more secure with our state-of-the-art PII detection technology.

How to do Inference :

from transformers import pipeline
gen = pipeline("token-classification", "lakshyakh93/deberta_finetuned_pii", device=-1)

text = "My name is John and I live in California."
output = gen(text, aggregation_strategy="first")

For any more details reach out to lakshaya.khandelwal@gmail.com

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · token-classification

Можно запустить

Подбираем GPU…

Класс архитектуры
DebertaForTokenClassification
Ревизия весов
a038061

0 моделей