Характеристики
- Контекст
- 512 токенов
- Параметры
- 15,6 млн
- Архитектура
- bert · dense
- Опубликована
- 23 июн 2022
Ссылки
tiny-bert-qnli-distilled
Компактная дистиллированная BERT-модель для классификации вопроса и текстового фрагмента в задаче QNLI на английском языке.
Бенчмарки
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Публичные оценки
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
Sayan01/tiny-bert-qnli-distilled — компактная дистиллированная модель семейства BERT, опубликованная пользователем Sayan01 на Hugging Face. Она предназначена для классификации пар текстов в задаче QNLI и может использоваться через Transformers как модель text-classification для sequence classification.
Модель имеет около 15,6 млн параметров, архитектурную основу BERT и максимальную длину входа 512 токенов. Она ориентирована на английский язык и подходит для определения отношения между вопросом и текстовым фрагментом, например для проверки, содержит ли фрагмент ответ на вопрос. Компактный размер упрощает локальный запуск и снижает требования к ресурсам, но модель специализирована на классификации, не генерирует ответы и не предназначена для произвольного многоязычного применения. Сведения о лицензии в доступных источниках не установлены.
Сценарии применения
- определение, содержит ли текст ответ на вопрос
- проверка релевантности фрагмента вопросу
- классификация пар вопрос–контекст
- фильтрация релевантных документов для поиска
Ограничения
Модель ограничена задачей классификации пар текстов и максимальной длиной входа 512 токенов; она не генерирует ответы и не предназначена для многоязычного использования.
Для каких профессий подходит9
Разделы каталога профессий, в задачах которых используется эта модель
Также подходит для
Карточка модели
README от автора на Hugging Face, как он его опубликовал
Автор не опубликовал карточку модели.
Как запустить
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм · text-classification
Подбираем GPU…
- Класс архитектуры
- BertForSequenceClassification
- Ревизия весов
- 3d5b3dc