/ Модель

Характеристики

Контекст
8 192 токена
Архитектура
flaird · dense
Библиотека
transformers
Опубликована
16 сен 2026

flaird-modernbert-large-attention-multitask

Классификация текстаТекст → label3 профессии

Дообученная модель FlairD для классификации текстовых последовательностей.

199скачиваний за 30 дней0лайковвеса обновлены17 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

flaird-modernbert-large-attention-multitask — модель классификации последовательностей на архитектуре FlairD, дообученная на неизвестном наборе данных. В карточке приведены результаты оценки: ROC-AUC 1,0, F1 0,997 и другие метрики, однако назначение классов и условия оценки не описаны.

Модель предназначена для задачи text-classification и принимает текст, выдавая классификационные оценки или метки. Репозиторий использует Transformers и формат весов safetensors. Базовая модель, языки, размер и лицензия в доступных данных не установлены. Практическую надёжность результатов трудно оценить без сведений о данных и методике проверки.

Сценарии применения

  • Классификация текстовых последовательностей
  • Присвоение меток текстам в пользовательской задаче
  • Оценка текстов по классам

Ограничения

В README не описаны назначение классов, обучающий набор данных и методика оценки; поэтому приведённые метрики не позволяют судить о качестве на других данных.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

flaird-modernbert-large-attention-multitask

This model is a fine-tuned version of on an unknown dataset. It achieves the following results on the evaluation set:

  • Loss: 0.0231
  • Roc-auc: 1.0
  • Brier: 0.995
  • C@1: 0.994
  • F1: 0.997
  • F05u: 0.999
  • Mean: 0.997

Model description

More information needed

Intended uses & limitations

More information needed

Training and evaluation data

More information needed

Training procedure

Training hyperparameters

The following hyperparameters were used during training:

  • learning_rate: 2e-05
  • train_batch_size: 128
  • eval_batch_size: 128
  • seed: 42
  • optimizer: Use OptimizerNames.ADAMW_TORCH_FUSED with betas=(0.9,0.999) and epsilon=1e-08 and optimizer_args=No additional optimizer arguments
  • lr_scheduler_type: cosine
  • lr_scheduler_warmup_steps: 0.06
  • num_epochs: 1

Training results

Training LossEpochStepValidation LossRoc-aucBrierC@1F1F05uMean
0.09030.100039680.08010.9970.9840.9790.9890.9950.989
0.06030.200079360.05850.9990.9850.9790.9890.9950.99
0.05160.3001119040.04600.9990.9920.9890.9940.9970.994
0.04330.4001158720.03850.9990.9890.9850.9920.9970.992
0.03690.5001198400.03351.00.9940.9910.9950.9980.996
0.03010.6001238080.02911.00.9930.9910.9950.9980.995
0.02940.7001277760.02671.00.9960.9940.9970.9990.997
0.02540.8002317440.02441.00.9940.9930.9960.9980.996
0.02390.9002357120.02331.00.9950.9940.9970.9990.997
0.02281.0396720.02311.00.9950.9940.9970.9990.997

Framework versions

  • Transformers 5.16.1
  • Pytorch 2.11.0+cu128
  • Datasets 4.0.0
  • Tokenizers 0.23.1

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers · text-classification

Нельзя запустить

Модели нужен код из репозитория; автор пока не в списке доверенных организаций.

Класс архитектуры
FlairdForSequenceClassification
Ревизия весов
ab52d15

0 моделей