/ Модель

Характеристики

Контекст
514 токенов
Параметры
305 млн
Архитектура
xlm-roberta · dense
Библиотека
transformers.js
Опубликована
8 ноя 2023

punctuate-all

Разметка токеновТекст → label3 профессии

Модель XLM-RoBERTa в формате ONNX для классификации токенов и предполагаемой расстановки пунктуации в тексте.

2 602скачиваний за 30 дней0лайковвеса обновлены8 ноя 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

realasd222/punctuate-all — модель XLM-RoBERTa для классификации токенов, опубликованная в формате ONNX для работы с Transformers.js. Она предназначена для разметки отдельных токенов; название репозитория указывает на применение для расстановки пунктуации, однако README не описывает эту функцию подробнее. Модель содержит около 305,2 млн параметров, принимает текст с контекстом до 514 токенов и выдаёт метки токенов.

Репозиторий содержит веса ONNX и предназначен для веб-среды через Transformers.js. Сведения о языках, лицензии и ограничениях качества в доступных материалах отсутствуют.

Сценарии применения

  • восстановление пунктуации в тексте
  • разметка токенов для постобработки текста
  • запуск классификации токенов в браузерных приложениях

Ограничения

README не приводит оценки качества и не уточняет схему меток или поддержку конкретных языков. Указанный контекст ограничен 514 токенами.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

https://huggingface.co/kredor/punctuate-all with ONNX weights to be compatible with Transformers.js.

Note: Having a separate repo for ONNX weights is intended to be a temporary solution until WebML gains more traction. If you would like to make your models web-ready, we recommend converting to ONNX using 🤗 Optimum and structuring your repo like this one (with ONNX weights located in a subfolder named onnx).

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers.js

Нельзя запустить

Модель выложена для браузера (ONNX / transformers.js).

Класс архитектуры
XLMRobertaForTokenClassification
Ревизия весов
2964dfe

0 моделей