/ Модель

Характеристики

Контекст
514 токенов
Параметры
138 млн
Архитектура
camembert · dense

tf-camembert-base

Заполнение пропусковТекст → текст3 профессии

TensorFlow-версия CamemBERT для предсказания пропущенных слов во французском тексте.

201скачиваний за 30 дней0лайковвеса обновлены11 дек 2020

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

jplu/tf-camembert-base — версия CamemBERT для TensorFlow, опубликованная jplu. Модель основана на архитектуре RoBERTa и предварительно обучена на французской части мультиязычного корпуса OSCAR. Это плотная языковая модель с 137,8 млн параметров и контекстом до 514 токенов.

Модель предназначена для заполнения пропусков в тексте: она предсказывает скрытые токены по окружающему контексту. Её можно использовать для подбора слов и анализа французских текстов с маскированными фрагментами. Репозиторий содержит веса TensorFlow; для загрузки README указывает Transformers версии 2.4 или новее. Лицензия в предоставленных данных не указана.

Сценарии применения

  • Подстановка пропущенного слова во французском предложении
  • Подбор вариантов продолжения маскированного фрагмента
  • Проверка языкового контекста французского текста

Ограничения

Модель ориентирована на французский язык и задачу заполнения масок; README не описывает её как универсальную модель для диалога или генерации произвольного текста. Контекст ограничен 514 токенами.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Tensorflow CamemBERT

In this repository you will find different versions of the CamemBERT model for Tensorflow.

CamemBERT

CamemBERT is a state-of-the-art language model for French based on the RoBERTa architecture pretrained on the French subcorpus of the newly available multilingual corpus OSCAR.

Model Weights

ModelDownloads
jplu/tf-camembert-baseconfig.json • tf_model.h5

Usage

With Transformers >= 2.4 the Tensorflow models of CamemBERT can be loaded like:

from transformers import TFCamembertModel

model = TFCamembertModel.from_pretrained("jplu/tf-camembert-base")

Huggingface model hub

All models are available on the Huggingface model hub.

Acknowledgments

Thanks to all the Huggingface team for the support and their amazing library!

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · fill-mask

Нельзя запустить

В репозитории нет весов в формате PyTorch/safetensors.

Класс архитектуры
CamembertForMaskedLM
Ревизия весов
2a40769

0 моделей