/ Модель

Характеристики

Контекст
8 192 токена
Параметры
149 млн
Лицензия
Apache 2.0
Архитектура
modernbert · dense
Базовая модель
ModernBERT-base
Библиотека
transformers
Опубликована
26 июн 2026

pii-layout-synth-v10

Разметка токеновТекст → label4 профессии

Дообученная модель ModernBERT для классификации токенов, оценённая на неизвестном наборе данных.

13скачиваний за 30 дней0лайковвеса обновлены26 июн 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

pii-layout-synth-v10 — дообученная на неизвестном наборе данных модель answerdotai/ModernBERT-base для классификации токенов. Она предназначена для разметки последовательностей текста; название модели указывает на возможную связь с синтетическими данными о расположении персональной информации, но README не подтверждает это назначение. Модель содержит 149 млн параметров, использует архитектуру ModernBERT и формат safetensors, работает через Transformers и поддерживает контекст до 8192 токенов.

В README приведены результаты оценки: F1 0,9931, точность 0,9986, precision 0,9913 и recall 0,9949; набор данных и методика оценки не раскрыты. Лицензия — Apache-2.0.

Сценарии применения

  • разметка токенов в последовательностях текста
  • экспериментальная классификация персональной информации в тексте

Ограничения

Датасет, точное назначение меток и методика оценки не описаны, поэтому приведённые высокие метрики нельзя уверенно переносить на другие данные. README не раскрывает сведения об ограничениях применения.

Для каких профессий подходит4

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

pii-layout-synth-v10

This model is a fine-tuned version of answerdotai/ModernBERT-base on an unknown dataset. It achieves the following results on the evaluation set:

  • Loss: 0.0061
  • Precision: 0.9913
  • Recall: 0.9949
  • F1: 0.9931
  • Accuracy: 0.9986

Model description

More information needed

Intended uses & limitations

More information needed

Training and evaluation data

More information needed

Training procedure

Training hyperparameters

The following hyperparameters were used during training:

  • learning_rate: 5e-05
  • train_batch_size: 16
  • eval_batch_size: 32
  • seed: 42
  • gradient_accumulation_steps: 2
  • total_train_batch_size: 32
  • optimizer: Use OptimizerNames.ADAMW_TORCH_FUSED with betas=(0.9,0.999) and epsilon=1e-08 and optimizer_args=No additional optimizer arguments
  • lr_scheduler_type: cosine_with_restarts
  • lr_scheduler_warmup_steps: 200
  • num_epochs: 5
  • mixed_precision_training: Native AMP

Training results

Training LossEpochStepValidation LossPrecisionRecallF1Accuracy
0.04790.24555000.01700.96150.97690.96920.9951
0.02320.490910000.00960.97960.98820.98380.9972
0.02020.736415000.00820.98200.98730.98460.9975
0.01880.981820000.00670.98290.98680.98490.9978
0.00941.227325000.00740.98610.99170.98890.9979
0.01271.472830000.00560.98790.99370.99080.9982
0.00991.718235000.00550.98780.99310.99050.9983
0.00851.963740000.00540.98810.99400.99100.9983
0.00402.209145000.00500.98880.99180.99030.9983
0.00412.454650000.00590.99050.99500.99270.9984
0.00362.700055000.00540.98930.99300.99120.9984
0.00362.945560000.00480.99150.99520.99330.9986
0.00133.191065000.00560.99150.99490.99320.9986
0.00113.436470000.00580.99100.99400.99250.9985
0.00143.681975000.00610.99130.99490.99310.9986

Framework versions

  • Transformers 5.12.1
  • Pytorch 2.12.1+cu130
  • Datasets 5.0.0
  • Tokenizers 0.22.2

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers · token-classification

Можно запустить

Подбираем GPU…

Класс архитектуры
ModernBertForTokenClassification
Ревизия весов
4a13f0d

0 моделей