/ Модель

Характеристики

Размер весов
8 МБ
Библиотека
hezar
Опубликована
8 авг 2023

word2vec-cbow-fa-wikipedia

ЭмбеддингиТекст → embedding3 профессии

Персидская модель word2vec на основе CBOW, обученная на Википедии для получения векторных представлений слов.

193скачиваний за 30 дней0лайковвеса обновлены10 дек 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

hezarai/word2vec-cbow-fa-wikipedia — модель векторных представлений персидских слов, разработанная Hezarai. Она обучена алгоритмом CBOW на данных Википедии и предназначена для извлечения эмбеддингов слов для задач обработки персидского текста.

Модель можно использовать как основу для поиска семантически близких слов и других NLP-сценариев, которым нужны векторные представления слов. Для работы автор предлагает библиотеку Hezar. Данные о размере вектора и условиях лицензии в предоставленных источниках отсутствуют.

Сценарии применения

  • получение эмбеддингов персидских слов
  • поиск семантически близких слов на персидском языке
  • подготовка векторных признаков для NLP-моделей
  • анализ сходства персидских слов

Ограничения

Обучение выполнено на данных Википедии, поэтому словарь и контекст могут не охватывать лексику других областей. Размерность эмбеддингов и лицензия в предоставленных источниках не описаны.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

This is the Persian word2vec embedding model trained with CBOW algorithm on the wikipedia data.

In order to use this model in Hezar you can simply use this piece of code:

pip install hezar
from hezar.embeddings import Embedding

w2v = Embedding.load("hezarai/word2vec-cbow-fa-wikipedia")
# Get embedding vector
vector = w2v("هزار")
# Find the word that doesn't match with the rest
doesnt_match = w2v.doesnt_match(["خانه", "اتاق", "ماشین"])
# Find the top-n most similar words to the given word
most_similar = w2v.most_similar("هزار", top_n=5)
# Find the cosine similarity value between two words
similarity = w2v.similarity("مهندس", "دکتر")

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · hezar

Нельзя запустить

В репозитории нет config.json: не понять архитектуру модели.

Ревизия весов
4f587a2

0 моделей