/ Модель

Характеристики

Контекст
512 токенов
Параметры
205 млн
Архитектура
bert · dense

rubert-ru-sentiment-rusentiment

Классификация текстаТекст → label4 профессии

Дообученная на русскоязычных публикациях VKontakte модель RuBERT для классификации тональности текста.

225скачиваний за 30 дней7лайковвеса обновлены20 мая 2021

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

RuBERT-Base-ru-sentiment-RuSentiment — русскоязычная модель классификации текста на основе архитектуры BERT, разработанная путём дообучения RuBERT на наборе RuSentiment. Датасет содержит публикации общего характера из социальной сети ВКонтакте, поэтому модель предназначена для анализа тональности русскоязычных постов и похожих текстов.

Модель насчитывает 205,1 млн параметров и принимает последовательности длиной до 512 токенов. Она выдаёт результат классификации текста; доступны версии в форматах PyTorch и Flax. Карточка приводит методику сравнения результатов на RuSentiment и других наборах, но в предоставленном фрагменте нет конкретных оценок качества. Лицензия в предоставленных данных не указана.

Сценарии применения

  • определение тональности постов в социальных сетях
  • анализ эмоциональной окраски русскоязычных публикаций
  • классификация отзывов по тональности
  • мониторинг общественной реакции на темы и события

Ограничения

Обучение на постах ВКонтакте общего характера может ограничивать перенос на другие жанры и предметные области. В предоставленной выдержке нет конкретных метрик качества, а контекст ограничен 512 токенами.

Для каких профессий подходит4

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

RuBERT-Base-ru-sentiment-RuSentiment

RuBERT-ru-sentiment-RuSentiment is a RuBERT model fine-tuned on RuSentiment dataset of general-domain Russian-language posts from the largest Russian social network, VKontakte.

The table shows per-task scores and a macro-average of those scores to determine a models’s position on the leaderboard. For datasets with multiple evaluation metrics (e.g., macro F1 and weighted F1 for RuSentiment), we use an unweighted average of the metrics as the score for the task when computing the overall macro-average. The same strategy for comparing models’ results was applied in the GLUE benchmark.

Citation

If you find this repository helpful, feel free to cite our publication:

@article{Smetanin2021Deep,
  author = {Sergey Smetanin and Mikhail Komarov},
  title = {Deep transfer learning baselines for sentiment analysis in Russian},
  journal = {Information Processing & Management},
  volume = {58},
  number = {3},
  pages = {102484},
  year = {2021},
  issn = {0306-4573},
  doi = {0.1016/j.ipm.2020.102484}
}

Dataset:

@inproceedings{rogers2018rusentiment,
  title={RuSentiment: An enriched sentiment analysis dataset for social media in Russian},
  author={Rogers, Anna and Romanov, Alexey and Rumshisky, Anna and Volkova, Svitlana and Gronas, Mikhail and Gribov, Alex},
  booktitle={Proceedings of the 27th international conference on computational linguistics},
  pages={755--763},
  year={2018}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · text-classification

Можно запустить

Подбираем GPU…

Класс архитектуры
BertForSequenceClassification
Ревизия весов
f3d755e

0 моделей