/ Модель

Характеристики

Контекст
512 токенов
Параметры
129 млн
Архитектура
bert · dense
Опубликована
8 мар 2024

CHATUtterance-zh_CN

Разметка токеновТекст → label3 профессии

Китайская BERT-модель TalkBank для сегментации высказываний посредством классификации токенов.

68скачиваний за 30 дней0лайковвеса обновлены16 мар 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

CHATUtterance-zh_CN — модель проекта TalkBank, разработанная для сегментации высказываний в китайской речи. Это производная от BERT модель для классификации токенов, обученная на примерах диаризации высказываний из китайских корпусов CHILDES: ZhouAssessment, Zhang Personal Narrative и Li Shared Reading. Её можно применять как модель классификации токенов в Transformers или использовать вместе с набором инструментов TalkBank Batchalign в режиме transcribe для полного анализа.

Модель содержит 129,5 млн параметров, работает с контекстом до 512 токенов и принимает текст, выдавая метки токенов. Она рассчитана на китайский язык; карточка не сообщает лицензию. Ее назначение специализировано на анализе речи и сегментации высказываний, поэтому перенос на другие языки и типы данных не подтверждён.

Сценарии применения

  • разметка границ высказываний в китайской речи
  • сегментация транскриптов разговоров на высказывания
  • анализ китайских речевых транскриптов в TalkBank Batchalign

Ограничения

Обучена на китайских корпусах CHILDES, поэтому её пригодность для других языков и типов данных не подтверждена. Лицензия в предоставленных данных не указана.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

TalkBank Batchalign CHATUtterance

CHATUtterance is a series of Bert-derivative models designed for the task of Utterance Segmentation released by the TalkBank project. This is the Mandarin model, which is trained on the the utterance diarization samples given by CHILDES Mandarin corpora: ZhouAssessment, Zhang Personal Narrative, Li Shared Reading.

Usage

The models can be used directly as a Bert-class token classification model following the instructions from Huggingface. Feel free to inspect this file for a sense of what the classes means. Alternatively, to get the full analysis possible with the model, it is best combined with the TalkBank Batchalign suite of analysis software, available here, using transcribe mode.

Target labels:

  • 0: regular form
  • 1: start of utterance/capitalized word
  • 2: end of declarative utterance (end this utterance with a .)
  • 3: end of interrogative utterance (end this utterance with a ?)
  • 4: end of exclamatory utterance (end this utterance with a !)
  • 5: break in the utterance; depending on orthography one can insert a ,

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · token-classification

Можно запустить

Подбираем GPU…

Класс архитектуры
BertForTokenClassification
Ревизия весов
d52d357

0 моделей