/ Модель

Характеристики

Контекст
8 192 токена
Параметры
100 млн
Лицензия
Своя лицензия
Архитектура
llama · dense
Базовая модель
LLaMmlein_120M
Библиотека
llm2vec
Опубликована
14 июл 2025

LLaMmlein2Vec_120M

ЭмбеддингиТекст → embedding9 профессий

Компактная немецкоязычная модель-энкодер для создания векторных представлений текста и семантического поиска.

51скачиваний за 30 дней0лайковвеса обновлены20 окт 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Эмбеддинги» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

LLäMmlein2Vec 120M — немецкоязычная модель-энкодер, созданная командой LSX-UniWue на основе собственной авторегрессионной модели LLäMmlein 120M с преобразованием по методу LLM2Vec. Она предназначена для получения векторных представлений немецких текстов, например для семантического поиска, сравнения текстов и построения систем поиска по документам. Модель построена на архитектуре LLaMA с двунаправленным энкодером LlamaBiModel, содержит около 100,1 млн параметров и обрабатывает контекст до 8192 токенов.

Для запуска авторы рекомендуют библиотеку llm2vec. Модель обучалась с использованием данных RedPajama-Data-V2. В метаданных указана лицензия other, поэтому условия использования следует уточнить в карточке модели и связанных материалах. Карточка ссылается на препринт, но не приводит здесь результаты оценки качества.

Сценарии применения

  • создание эмбеддингов немецких предложений и документов
  • семантический поиск по немецким документам
  • сравнение смысловой близости немецких текстов
  • поиск похожих документов
  • получение векторных признаков немецкого текста для ML-систем

Ограничения

Модель ориентирована на немецкий язык и не предназначена для генерации текста. Лицензия указана как other, поэтому условия коммерческого и иного использования нужно проверить в карточке модели.

Для каких профессий подходит9

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

LLäMmlein2Vec 120M

LLäMmlein2Vec 120M is a German encoder language model derived from our German decoder-only model LLäMmlein 120M via LLM2Vec.

We provide three transformed models:

Find more details in our preprint!

Usage

You can use LLäMmlein2Vec with the llm2vec library.

import torch
from llm2vec import LLM2Vec

model_id = "LSX-UniWue/LLaMmlein2Vec_120M"
l2v = LLM2Vec.from_pretrained(
    model_id, 
    device_map="cuda" if torch.cuda.is_available() else "cpu",
    torch_dtype=torch.bfloat16,
)

License

We release the ModernGBERT models under a research-only RAIL-M license. See license.md for details. Data Take Down

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · llm2vec

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaBiModel
Ревизия весов
0f31574

0 моделей