/ Модель

Характеристики

Контекст
512 токенов
Параметры
129 млн
Лицензия
CC BY-NC-SA 4.0
Архитектура
bert · dense

chinese-pert-base

ЭмбеддингиТекст → embedding4 профессии

Китайская BERT-модель для извлечения контекстных признаков из текста и получения векторных представлений токенов.

79скачиваний за 30 дней13лайковвеса обновлены24 фев 2022

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Эмбеддинги» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

hfl/chinese-pert-base — китайская модель семейства BERT, опубликованная HFL. Это плотный трансформер BertModel примерно на 129,5 млн параметров, предназначенный для извлечения признаков из текста; README рекомендует загружать её средствами для BERT. Модель принимает текст и формирует контекстные векторные представления токенов, которые можно использовать как признаки в последующих задачах обработки китайского языка.

Контекст модели составляет 512 токенов. Доступны веса PyTorch и TensorFlow. Лицензия CC BY-NC-SA 4.0 требует указания авторства и распространяет производные материалы на тех же условиях; лицензия также ограничивает коммерческое использование. Карточка находится в разработке и отсылает за дополнительными сведениями к репозиторию GitHub.

Сценарии применения

  • извлечение признаков для китайского текста
  • получение контекстных представлений токенов
  • подготовка признаков для последующей NLP-классификации
  • использование BERT-векторов в китайских текстовых пайплайнах

Ограничения

README отмечает, что карточка находится в разработке и направляет за дополнительными сведениями в GitHub-репозиторий. Контекст ограничен 512 токенами; лицензия CC BY-NC-SA 4.0 не допускает коммерческое использование.

Для каких профессий подходит4

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Please use 'Bert' related functions to load this model!

Under construction...

Please visit our GitHub repo for more information: https://github.com/ymcui/PERT

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
BertModel
Ревизия весов
54f84f9

0 моделей