Характеристики

Контекст: 512 токенов
Параметры: 119 млн
Лицензия: CC BY-SA 4.0
Архитектура: roberta · dense
Базовая модель: roberta-base-ainu-upos
Опубликована: 5 янв 2023

Ссылки

Hugging Face

roberta-base-ainu-ud-goeswith

KoichiYasuoka

Разметка токеновТекст → label

Модель RoBERTa для разметки частей речи и синтаксических зависимостей в текстах на айнском языке.

130скачиваний за 30 дней0лайковвеса обновлены1 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Koichi Yasuoka разработал эту модель на основе RoBERTa, предварительно обученной на текстах на айнском языке и дообученной для разметки универсальных зависимостей. Она предназначена для анализа айнских предложений: определяет части речи и синтаксические зависимости, включая связь goeswith для составных слов и подслов. Модель рассчитана на текст на айнском языке, записанный катаканой, латиницей или кириллицей; размер составляет 118,5 млн параметров, контекст — до 512 токенов.

Репозиторий содержит веса PyTorch, лицензия — CC BY-SA 4.0. Модель специализирована на айнском языке, поэтому её возможности для других языков и задач не подтверждены.

Сценарии применения

разметка частей речи в айнских предложениях
синтаксический разбор айнского текста
анализ зависимостей goeswith для составных слов
лингвистическая разметка айнских текстов в катакане, латинице и кириллице

Ограничения

Модель ориентирована на айнский язык и контекст до 512 токенов; пригодность для других языков и задач не подтверждена.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

roberta-base-ainu-ud-goeswith

Model Description

This is a RoBERTa model pre-trained on Ainu texts (in カタカナ, Roman, and Кириллица) for POS-tagging and dependency-parsing (using goeswith for subwords), derived from roberta-base-ainu-upos.

How to Use

from transformers import pipeline
nlp=pipeline("universal-dependencies","KoichiYasuoka/roberta-base-ainu-ud-goeswith",trust_remote_code=True,aggregation_strategy="simple")
print(nlp("itak=as awa pon rupne aynu ene itaki"))

Reference

安岡孝一: ローマ字・カタカナ・キリル文字併用アイヌ語RoBERTa・DeBERTaモデルの開発, 情報処理学会研究報告, Vol.2023-CH-131『人文科学とコンピュータ』, No.7 (2023年2月18日), pp.1-7.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · token-classification

Можно запустить

Подбираем GPU…

Класс архитектуры: RobertaForTokenClassification
Ревизия весов: be17cdc