Характеристики

Контекст: 512 токенов
Параметры: 498 млн
Архитектура: bert · dense
Опубликована: 19 мая 2023

Ссылки

buddhist-sentence-similarity

ЭмбеддингиТекст → embedding3 профессии

Модель на основе LaBSE создаёт векторные представления буддийских текстов для поиска похожих предложений и выравнивания параллельных текстов.

132скачиваний за 30 дней3лайкавеса обновлены11 ноя 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

Добавьте модель в бенчмарк
Вместе с другими моделями категории «Эмбеддинги» — сравнение идёт внутри одной категории.
Опишите свои задачи
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Запустите и опубликуйте
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Открыть конструктор бенчмарка

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель buddhist-nlp/buddhist-sentence-similarity — модель для получения векторных представлений предложений, разработанная на основе LaBSE. Она предназначена для оценки сходства предложений при поиске информации и для выравнивания параллельных текстов. Модель поддерживает тибетский, буддийский китайский, санскрит в транслитерации IAST и пали в транслитерации IAST.

Архитектура — BERT; размер составляет 498,1 млн параметров, максимальная длина контекста — 512 токенов. Модель принимает текст и выдаёт векторные представления. Распространяется в форматах PyTorch и safetensors. Лицензия в предоставленных данных не указана.

Сценарии применения

Поиск похожих предложений в буддийских текстах
Семантический поиск по тибетским текстам
Поиск соответствий между буддийскими текстами на разных языках
Выравнивание параллельных предложений на санскрите и пали
Извлечение эмбеддингов предложений на буддийском китайском

Ограничения

Контекст ограничен 512 токенами. Для санскрита и пали предусмотрена транслитерация IAST; качество за пределами перечисленных языков и задач не описано.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

I.11Универсальные способностиКлассификация, ранжирование и сопоставлениеAI помогает распределять объекты по категориям, устанавливать соответствия и определять порядок обработки.15 задач26 736моделей I.6Универсальные способностиПеревод и языковая адаптацияAI помогает переносить смысл между языками, форматами и культурными контекстами.16 задач16 710моделей IV.9Отраслевые задачиМедиа, журналистика, культура, архивы и игрыAI помогает создавать, искать, сохранять и персонализировать медиа, культурный и игровой контент.44 задачи14 938моделей

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

This model is based on LaBSE, uses utf8 for most languages with the exception of Sanskrit which is in IAST.
The objective was sentence similarity for information retrieval and bitext alignment tasks.
It handles Tibetan, Buddhist Chinese, Sanskrit (IAST), and Pāli (IAST).

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры: BertModel
Ревизия весов: 1cf906c