Дообученная XLM-RoBERTa классифицирует электронные письма как спам или не спам на поддерживаемых моделью языках.
432скачиваний за 30 дней2лайкавеса обновлены10 мая 2023
Бенчмарки
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Публичные оценки
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
Модель kauffinger/xlm-roberta-base-finetuned-enron — дообученная автором модель XLM-RoBERTa для классификации спама в электронной почте. Она предназначена для выявления спам-писем на языках, поддерживаемых XLM-RoBERTa; автор отдельно отмечает интерес к немецкому языку из-за нехватки размеченных немецких данных.
Модель построена на архитектуре XLM-RoBERTa и содержит 305,2 млн параметров. Она принимает текст, использует контекст до 514 токенов и выдаёт метку классификации. Проверка проведена только на тестовой выборке Enron Spam, где указаны точность 0,996 и ошибка 0,0315; автор предупреждает, что широкого тестирования на целевом применении не было. Лицензия — MIT.
Сценарии применения
фильтрация спама в немецкой электронной почте
автоматическая сортировка входящих писем по признаку спама
предварительная разметка писем для почтового фильтра
Ограничения
Модель проверена только на тестовой выборке Enron Spam; её качество на немецких и других целевых данных тщательно не оценивалось. Контекст ограничен 514 токенами.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель
I trained this model to detect spam in german as there is no german labeled spam mail dataset, and I could not find an already pretrained multilingual model for the enron spam dataset.
Intended use
Identifying spam mail in any XLM-RoBERTa-supported language.
Note that there was no thorough testing on it's intended use - only validation on the enron mail dataset.
Evaluation
Eval on test set of enron spam:
loss: 0.0315
accuracy: 0.996
Как запустить
На своей GPU в ailist. Цена — по текущим предложениям провайдеров