/ Модель

Характеристики

Контекст
512 токенов
Параметры
138 млн
Лицензия
MIT
Архитектура
bert · dense

DKbert-hatespeech-detection

Классификация текстаТекст → label3 профессии

BERT-модель для классификации датского текста и выявления ненавистнических высказываний.

28скачиваний за 30 дней1лайквеса обновлены22 сен 2021

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

DKbert-hatespeech-detection — модель классификации датского текста для выявления языка ненависти. Её разработали Johan Horsmans и Gustav Aarup Lauridsen в рамках экзаменационного проекта по Cultural Data Science; модель основана на архитектуре BERT и содержит 137,8 млн параметров. Она принимает текстовые последовательности длиной до 512 токенов и выдаёт метку классификации.

Модель обучена на данных OffensEval2020 и предназначена для выявления ненавистнических высказываний в датском тексте, например, при анализе публикаций и комментариев. В карточке указан macro F1 0,78; для класса hateful точность составляет 0,77, а полнота — 0,49, поэтому часть таких высказываний может остаться нераспознанной. Лицензия — MIT.

Сценарии применения

  • выявление языка ненависти в датских публикациях
  • модерация комментариев на датском языке
  • классификация датских сообщений по наличию ненавистнических высказываний

Ограничения

Полнота для класса hateful составляет 0,49, поэтому модель может пропускать значительную долю ненавистнических высказываний. Она предназначена для датского языка и ограничена контекстом в 512 токенов.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

DKbert-hatespeech-classification

Use this model to detect hatespeech in Danish. For details, guide and command line tool see DK hate github

Training data

Training data is from OffensEval2020 which can be found here

Performance

The model achieves a macro F1-score of 0.78

Precision hateful: 0.77

Recall hateful: 0.49

See more on DK hate github

Training procedure

Project information

This model was made in collaboration between Johan Horsmans and Gustav Aarup Lauridsen for their Cultural Data Science Exam.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · text-classification

Можно запустить

Подбираем GPU…

Класс архитектуры
BertForSequenceClassification
Ревизия весов
edbbde9

0 моделей