/ Модель

Характеристики

Контекст
514 токенов
Параметры
305 млн
Лицензия
MIT
Архитектура
xlm-roberta · dense
Базовая модель
xlm-roberta-base
Опубликована
20 сен 2026

grounded-multilingual-base

Разметка токеновТекст → label

Многоязычный классификатор токенов на базе XLM-RoBERTa, который выявляет в ответах ассистента фрагменты, не подтверждённые переданными источниками.

29скачиваний за 30 дней0лайковвеса обновлены20 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

aghasalim/grounded-multilingual-base — многоязычная модель классификации токенов на базе XLM-RoBERTa-base, дообученная для поиска фрагментов ответа ассистента, которые не подтверждаются предоставленными источниками. Она принимает ответ вместе с источниками и помечает неподдержанные фрагменты; предназначена для проверки обоснованности ответов в системах RAG и контроля фактической согласованности с контекстом.

Модель содержит 305,2 млн параметров, использует формат safetensors и имеет контекст до 514 токенов по метаданным. В README описано обучение на примерах RAGTruth и синтетических размеченных ответах на 30 языках, а также оценка на 31 языке. В приведённом тесте она обнаружила 352 из 372 специально внесённых ошибок, при этом дала 32 ложных срабатывания из 62 случаев; это результаты конкретного бенчмарка, а не гарантия качества на других данных.

Для использования доступны библиотека groundedness с размещённой моделью и загрузка через Transformers. README отмечает ограничения на короткие ответы в бизнес-домене и усечение длинных документов до 384 токенов; модель сопоставляет ответ только с переданными источниками и не является самостоятельным фактчекером. Лицензия — MIT.

Сценарии применения

  • поиск неподтверждённых фрагментов в ответах RAG-систем
  • проверка обоснованности ответа по внутренним документам
  • выявление внесённых фактических ошибок в коротких ответах ассистента

Ограничения

README указывает, что модель ориентирована на короткие ответы в бизнес-домене; длинные входные документы усекаются до 384 токенов. Она сравнивает ответ только с предоставленными источниками и не проверяет факты независимо.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

grounded-multilingual-base

Repo: aghasalim/grounded-multilingual-base (published as siba/grounded-multilingual-base in the paper and leaderboard — same weights).

Token classifier: which spans of an assistant's answer are not supported by the sources it was given. Input <s> answer </s></s> sources </s>; label 1 = unsupported.

Trained on 2,844 synthetic labelled answers in 30 languages (business documents, 100 domains, errors planted and marked by open LLMs) plus 3,883 RAGTruth answers. Fine-tuned from xlm-roberta-base, 384 tokens, 3 epochs, Apple M4.

Benchmark (31 languages, 434 cases, github.com/aghasalim/groundedness): 352/372 planted errors caught, 32/62 false alarms, ~400 ms on a Raspberry Pi 5 (int8). HHEM-2.1-Open on the same cases: 265/372 but 22/62 false alarms.

Use: pip install groundedness then check(answer, sources, model="siba") (hosted), or load with transformers and the detect.py in the repo.

Limits: short-answer business domain; long documents are truncated to 384 tokens; not a fact checker — it compares against the sources you give it.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · token-classification

Можно запустить

Подбираем GPU…

Класс архитектуры
XLMRobertaForTokenClassification
Ревизия весов
b99c52b

0 моделей