/ Модель

Характеристики

Контекст
2 048 токенов
Параметры
303 млн
Лицензия
Gemma
Архитектура
gemma3_text · dense
Базовая модель
embeddinggemma-300m
Библиотека
sentence-transformers
Опубликована
6 сен 2025

embeddinggemma-300m-GGUF

ЭмбеддингиТекст → embedding9 профессий

embeddinggemma-300m-GGUF — это модель для создания векторных представлений текста, основанная на google/embeddinggemma-300m.

658скачиваний за 30 дней0лайковвеса обновлены12 сен 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Исходную модель разработала Google, а GGUF-версии подготовила Second State Inc. Модель предназначена для задач семантического сходства и других сценариев, где требуется сравнивать тексты по смыслу, включая поиск и работу с векторными индексами.

Модель поддерживает запуск через sentence-transformers и LlamaEdge, использует специальный режим embedding и имеет контекстное окно 2048 токенов. Доступны варианты размерности эмбеддингов 128, 256, 512 и 768. Репозиторий содержит квантованные GGUF-файлы размером примерно от 212 до 329 МБ, а также версию f16 размером 616 МБ. Квантование уменьшает требования к ресурсам, но может снижать качество: Q4_K_M, Q5_K_M и Q5_K_S обозначены как сбалансированные или рекомендуемые варианты, тогда как наиболее компактные версии имеют существенные потери качества.

README не содержит сведений о поддерживаемых языках, точной архитектуре, составе модальностей или конкретных наборах данных обучения. Модель распространяется по лицензии Gemma; условия лицензии следует учитывать при использовании.

Для каких профессий подходит9

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

embeddinggemma-300m-Embedding-GGUF

Original Model

google/embeddinggemma-300m

Run with LlamaEdge

  • LlamaEdge version: v0.26.1 and above

  • Prompt template

    • Prompt type: embedding
  • Context size: 2048

  • Embedding size: 128, 256, 512, 768

  • Run as LlamaEdge service

    wasmedge --dir .:. --nn-preload default:GGML:AUTO:embeddinggemma-300m-f16.gguf \
      llama-api-server.wasm \
      --prompt-template embedding \
      --ctx-size 768 \
      --model-name embeddinggemma-300m
    

Quantized GGUF Models

NameQuant methodBitsSizeUse case
embeddinggemma-300m-Q2_K.ggufQ2_K2212 MBsmallest, significant quality loss - not recommended for most purposes
embeddinggemma-300m-Q3_K_L.ggufQ3_K_L3227 MBsmall, substantial quality loss
embeddinggemma-300m-Q3_K_M.ggufQ3_K_M3224 MBvery small, high quality loss
embeddinggemma-300m-Q3_K_S.ggufQ3_K_S3218 MBvery small, high quality loss
embeddinggemma-300m-Q4_0.ggufQ4_04229 MBlegacy; small, very high quality loss - prefer using Q3_K_M
embeddinggemma-300m-Q4_K_M.ggufQ4_K_M4236 MBmedium, balanced quality - recommended
embeddinggemma-300m-Q4_K_S.ggufQ4_K_S4232 MBsmall, greater quality loss
embeddinggemma-300m-Q5_0.ggufQ5_05242 MBlegacy; medium, balanced quality - prefer using Q4_K_M
embeddinggemma-300m-Q5_K_M.ggufQ5_K_M5247 MBlarge, very low quality loss - recommended
embeddinggemma-300m-Q5_K_S.ggufQ5_K_S5243 MBlarge, low quality loss - recommended
embeddinggemma-300m-Q6_K.ggufQ6_K6260 MBvery large, extremely low quality loss
embeddinggemma-300m-Q8_0.ggufQ8_08329 MBvery large, extremely low quality loss - not recommended
embeddinggemma-300m-f16.gguff1616616 MBvery large, extremely low quality loss - not recommended

Quantized with llama.cpp b6397

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · sentence-transformers

Нельзя запустить

GGUF-веса поддерживаются только для текстовых LLM (llama.cpp).

Класс архитектуры
Gemma3TextModel
Ревизия весов
e22086a

0 моделей