/ Модель

Характеристики

Контекст
514 токенов
Параметры
305 млн
Лицензия
CC BY 4.0
Архитектура
xlm-roberta · dense
Базовая модель
xlm-roberta-base
Опубликована
4 авг 2022

EstRoBERTa

Заполнение пропусковТекст → текст4 профессии

EstRoBERTa — дообученная на эстонском языке модель XLM-RoBERTa для извлечения признаков и предсказания замаскированных токенов.

113скачиваний за 30 дней0лайковвеса обновлены20 ноя 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

EstRoBERTa — модель обработки эстонского языка, разработанная tartuNLP и дообученная на базе XLM-RoBERTa base. Это плотная трансформерная модель с архитектурой XLM-RoBERTa и примерно 305,2 млн параметров; она принимает текст и может использоваться для извлечения признаков и предсказания замаскированных токенов. Контекст модели составляет до 514 токенов.

Модель подходит для получения текстовых представлений и для задач, основанных на заполнении пропусков в эстонском тексте. Подробности об обучающих данных, метриках и ограничениях качества в карточке не приведены. Лицензия — CC BY 4.0.

Сценарии применения

  • извлечение признаков из эстонских текстов
  • получение представлений эстонских предложений
  • заполнение замаскированных слов в эстонском тексте

Ограничения

Карточка не содержит сведений об обучающих данных, метриках и результатах оценки, поэтому качество на конкретных задачах по ней определить нельзя.

Для каких профессий подходит4

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Model Card for EstRoBERTa

Model Details

Model Description

  • Language(s) (NLP): Estonian
  • License: cc-by-4.0
  • Finetuned from model [optional]: XLM-RoBERTa base.

Uses

Direct Use

[More Information Needed]

Downstream Use [optional]

[More Information Needed]

Out-of-Scope Use

[More Information Needed]

Bias, Risks, and Limitations

[More Information Needed]

Recommendations

Users (both direct and downstream) should be made aware of the risks, biases and limitations of the model. More information needed for further recommendations.

How to Get Started with the Model

Use the code below to get started with the model.

[More Information Needed]

Training Details

Training Data

[More Information Needed]

Training Procedure

Training Hyperparameters

  • Training regime: [More Information Needed]

Evaluation

Testing Data, Factors & Metrics

Testing Data

[More Information Needed]

Metrics

[More Information Needed]

Results

[More Information Needed]

Summary

Model Architecture and Objective

[More Information Needed]

Compute Infrastructure

[More Information Needed]

Hardware

[More Information Needed]

Software

[More Information Needed]

Citation

@misc{kairit_sirts_2025,
	author       = { Kairit Sirts },
	title        = { EstRoBERTa (Revision 5669b06) },
	year         = 2025,
	url          = { https://huggingface.co/tartuNLP/EstRoBERTa },
	doi          = { 10.57967/hf/7046 },
	publisher    = { Hugging Face }
}

Model Card Contact

Kairit Sirts

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · fill-mask

Можно запустить

Подбираем GPU…

Класс архитектуры
XLMRobertaForMaskedLM
Ревизия весов
3d58fa1

0 моделей