/ Модель

Характеристики

Контекст
514 токенов
Параметры
138 млн
Архитектура
camembert · dense
Опубликована
2 мар 2022

politics-sentence-classifier

Классификация текстаТекст → label3 профессии

Модель на базе CamemBERT классифицирует предложения французской политической речи как описание проблемы, решения или прочий текст.

22скачиваний за 30 дней5лайковвеса обновлены26 мар 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Это модель классификации предложений о французской политике, разработанная mazancourt и обученная с помощью AutoNLP. Она относит отдельное предложение к одному из трёх классов: проблема, решение или прочее. Модель основана на CamemBERT, содержит 137,8 млн параметров и принимает текст с контекстом до 514 токенов.

Модель предназначена для анализа политических речей и публикаций, например для поиска формулировок проблем и предлагаемых решений. Валидационная точность составляет около 81%, а macro F1 — около 0,77. Обучающие примеры извлечены из французских политических твитов и выступлений, поэтому качество на других жанрах, темах и языках может быть ниже. Лицензия в предоставленных сведениях не указана.

Сценарии применения

  • поиск описаний проблем во французских политических речах
  • выделение предложений с политическими предложениями и решениями
  • классификация политических твитов по типу высказывания
  • анализ содержания выступлений французских политиков

Ограничения

Обучена на французских политических твитах и выступлениях, поэтому может хуже работать на других жанрах и языках. Валидационная точность составляет около 81%; лицензия в доступных данных не указана.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Prediction of sentence "nature" in a French political sentence

This model aims at predicting the nature of a sentence in a French political sentence. The predictions fall in three categories:

  • problem: the sentence describes a problem (usually to be tackled by the speaker), for example il y a dans ce pays une fracture (J. Chirac)
  • solution: the sentences describes a solution (typically part of a political programme), for example: J’ai supprimé les droits de succession parce que je crois au travail et parce que je crois à la famille. (N. Sarkozy)
  • other: the sentence does not belong to any of these categories, for example: vive la République, vive la France

This model was trained using AutoNLP based on sentences extracted from a mix of political tweets and speeches.

Model Trained Using AutoNLP

  • Problem type: Multi-class Classification
  • Model ID: 23105051
  • CO2 Emissions (in grams): 1.06099358268878

Validation Metrics

  • Loss: 0.6050735712051392
  • Accuracy: 0.8097826086956522
  • Macro F1: 0.7713543865034599
  • Micro F1: 0.8097826086956522
  • Weighted F1: 0.8065488494385247
  • Macro Precision: 0.7861074705111403
  • Micro Precision: 0.8097826086956522
  • Weighted Precision: 0.806470454156932
  • Macro Recall: 0.7599656456873758
  • Micro Recall: 0.8097826086956522
  • Weighted Recall: 0.8097826086956522

Usage

You can use cURL to access this model:

$ curl -X POST -H "Authorization: Bearer YOUR_API_KEY" -H "Content-Type: application/json" -d '{"inputs": "Il y a dans ce pays une fracture"}' https://api-inference.huggingface.co/models/mazancourt/politics-sentence-classifier

Or Python API:

from transformers import AutoModelForSequenceClassification, AutoTokenizer

model = AutoModelForSequenceClassification.from_pretrained("mazancourt/autonlp-politics-sentence-classifier-23105051", use_auth_token=True)

tokenizer = AutoTokenizer.from_pretrained("mazancourt/politics-sentence-classifier", use_auth_token=True)

inputs = tokenizer("Il y a dans ce pays une fracture", return_tensors="pt")

outputs = model(**inputs)

# Category can be "problem", "solution" or "other"
category = outputs[0]["label"]
score = outputs[0]["score"]

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · text-classification

Можно запустить

Подбираем GPU…

Класс архитектуры
CamembertForSequenceClassification
Ревизия весов
1653ec0

0 моделей