Характеристики
- Контекст
- 512 токенов
- Параметры
- 434 млн
- Лицензия
- Apache 2.0
- Архитектура
- bert · dense
- Библиотека
- transformers
- Опубликована
- 25 июл 2023
Ссылки
compositional-bert-large-uncased
Англоязычная BERT Large-модель для оценки семантического сходства предложений и поиска похожих текстов.
Бенчмарки
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Тесты пользователейпока нет
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Добавьте модель в бенчмарк
Вместе с другими моделями категории «Эмбеддинги» — сравнение идёт внутри одной категории.
Опишите свои задачи
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Запустите и опубликуйте
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Публичные оценки
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
perceptiveshawty/compositional-bert-large-uncased — англоязычная модель на архитектуре BERT Large без учёта регистра, разработанная пользователем или организацией perceptiveshawty для оценки семантического сходства предложений. Модель предназначена для сравнения текстов, поиска похожих предложений и построения систем семантического сопоставления.
Модель содержит около 433,9 млн параметров, работает через библиотеку Transformers и поддерживает контекст до 512 токенов. В качестве источников обучения указаны datasets-for-compcse и datasets-for-simcse. Модель ориентирована на английский язык и распространяется по лицензии Apache-2.0.
Сценарии применения
- сравнение двух предложений по смыслу
- поиск семантически похожих текстов
- дедупликация англоязычных документов
- ранжирование результатов по смысловой близости
- построение эмбеддингов предложений
Ограничения
Модель предназначена для английского языка и не учитывает регистр символов. Максимальная длина контекста составляет 512 токенов; эффективность для других языков и задач, отличных от оценки сходства предложений, не подтверждена.
Для каких профессий подходит10
Разделы каталога профессий, в задачах которых используется эта модель
Также подходит для
Карточка модели
README от автора на Hugging Face, как он его опубликовал
Автор не опубликовал карточку модели.
Как запустить
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм · transformers
Подбираем GPU…
- Класс архитектуры
- BertForCL
- Ревизия весов
- c08de04