/ Модель

Характеристики

Контекст
512 токенов
Архитектура
distilbert · dense
Опубликована
10 дек 2022

NSFW_text_classifier

Классификация текстаТекст → label3 профессии

Дообученная DistilBERT, которая классифицирует английские тексты как NSFW или SFW для фильтрации неподходящих публикаций.

10 036скачиваний за 30 дней111лайковвеса обновлены10 дек 2022

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

michelleli99/NSFW_text_classifier — дообученная модель DistilBERT для классификации текстов по признаку NSFW. Она анализирует публикации и относит их к одному из двух классов: NSFW (неподходящий или непрофессиональный контент) и SFW. Модель дообучена на 14 317 публикациях Reddit и предназначена для фильтрации текстов, например в сообществах и пользовательских сервисах.

Модель использует архитектуру DistilBertForSequenceClassification, принимает текст и выдаёт метку класса. Контекст составляет 512 токенов; в карточке указан английский язык. Модель распространяется в формате PyTorch. Сведения о лицензии в предоставленных данных отсутствуют.

Сценарии применения

  • фильтрация неподходящих публикаций на форумах
  • модерация текстов в сообществах Reddit
  • проверка пользовательских комментариев на NSFW-содержание

Ограничения

Обучена на публикациях Reddit, поэтому может ошибаться на текстах из других источников и контекстов; известны только два класса — NSFW и SFW. Контекст ограничен 512 токенами.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Fine-tuned DistilRoBERTa-base for NSFW Classification

Model Description

DistilBERT is a transformer model that performs sentiment analysis. I fine-tuned the model on Reddit posts with the purpose of classifying not safe for work (NSFW) content, specifically text that is considered inappropriate and unprofessional. The model predicts 2 classes, which are NSFW or safe for work (SFW).

The model is a fine-tuned version of DistilBERT.

It was fine-tuned on 14317 Reddit posts pulled from the (Reddit API) [https://praw.readthedocs.io/en/stable/].

How to Use

from transformers import pipeline
classifier = pipeline("sentiment-analysis", model="michellejieli/NSFW_text_classification")
classifier("I see you’ve set aside this special time to humiliate yourself in public.")
Output:
[{'label': 'NSFW', 'score': 0.998853325843811}]

Contact

Please reach out to michelle.li851@duke.edu if you have any questions or feedback.


Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · text-classification

Можно запустить

Подбираем GPU…

Класс архитектуры
DistilBertForSequenceClassification
Ревизия весов
652bad2

0 моделей