/ Модель

Характеристики

Контекст
514 токенов
Параметры
124 млн
Лицензия
Apache 2.0
Архитектура
xlm-roberta · dense
Базовая модель
search-reranker-broad-policy-v8
Опубликована
20 мар 2026

search-reranker-broad-policy-v9

Классификация текстаТекст → label3 профессии

Дообученный XLM-RoBERTa-ранжировщик TEMSA для перестановки результатов поиска по государственной политике и запросам об обладателях должностей.

282скачиваний за 30 дней0лайковвеса обновлены20 мар 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

temsa/search-reranker-broad-policy-v9 — выпуск модели для ранжирования результатов поиска по государственным политикам и запросам об обладателях должностей. Разработчик — TEMSA. Это дообученная версия temsa/search-reranker-broad-policy-v8 на базе XLM-RoBERTa с 124,3 млн параметров; доступны веса Safetensors и ONNX-квантованный артефакт q8. README характеризует выпуск как serving-policy: веса и семейство q8 ONNX сохранены относительно v8, а логика gov_broad_v1 улучшена для запросов об истории изменений по годам; маршрут office_holder_v1 сохранён.

Модель предназначена для заключительного этапа поиска: она оценивает пары запроса и документа, чтобы переставить найденные материалы о госполитике и сведения об обладателях должностей. README рекомендует ONNX, 10 потоков и максимальную длину 160 токенов для широких запросов по политике и 208 для запросов об обладателях должностей. На указанных тестовых наборах приведены значения MRR@10 от 0,9282 до 1,0000; производительность зависит от маршрута и профиля. Контекст модели — до 514 токенов. Метаданные указывают английский язык карточки и теги английского и ирландского, но целевая оценка в README сосредоточена на поиске по госполитике.

Лицензия — Apache-2.0. Это специализированный поисковый ранжировщик, а не универсальная модель для генерации ответов; приведённые метрики относятся к описанным наборам и профилям, поэтому не гарантируют качество на иных коллекциях и запросах.

Сценарии применения

  • переранжирование результатов поиска по документам государственной политики
  • поиск изменений в политике с указанием года
  • поиск документов по запросам об обладателях государственных должностей
  • ускоренное CPU-ранжирование кандидатов через ONNX q8

Ограничения

Модель специализирована на поисковых запросах по госполитике и обладателям должностей; метрики в карточке измерены на перечисленных наборах и не подтверждают качество на других доменах. Рекомендуемые профили ограничивают длину входа 160 или 208 токенами, при максимальном контексте 514 токенов.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

search-reranker-broad-policy-v9

Broad-policy serving release for gov search.

This is a serving-policy release over temsa/search-reranker-broad-policy-v8:

  • same raw weights
  • same q8 ONNX artifact family
  • improved gov_broad_v1 logic for year-specific change-history queries
  • same office-holder route

Recommended serving profiles

Broad policy queries:

  • policy: gov_broad_v1
  • backend: onnx
  • threads: 10
  • max length: 160

Office-holder identity queries:

  • policy: office_holder_v1
  • backend: onnx
  • threads: 10
  • max length: 208

Key q8 results

Suitev9
Legacy policy all v2 MRR@10 (160)0.9282
Corrected policy holdout v5 MRR@10 (160)1.0000
Fresh policy holdout v6 MRR@10 (160)0.9500
Fresh policy holdout v7 MRR@10 (160)0.9500
gov.ie category policy v1 corrected MRR@10 (160)1.0000
Office valid MRR@10 (208)1.0000
Office holdout v3 MRR@10 (208)1.0000
Office holdout v4 MRR@10 (208)0.9659

Representative throughput:

  • gov.ie category policy v1 corrected (160): 26.01 qps
  • office valid (208): 20.77 qps
  • office holdout v3 (208): 18.43 qps

Portfolio comparison

Updated 2026-03-20 from local reranker reports only.

Use this section as the side-by-side public temsa reranker view. Cells are intentionally left out or summarized when the local report set does not contain a trustworthy non-quantized benchmark for the same public path.

General bilingual rerankers

RepoPrimary roleNon-quantized pathQuantized pathExtra trustworthy signals
temsa/search-reranker-broad-v1Broad final-stage rerankerONNX fp32 l256: proxy 0.9490 / 2.08 qpsSibling q8 l160: proxy 0.9458 / 8.41 qpsoffice 0.8056; hard-k10 0.9815; holdout-a03 0.8759
temsa/search-reranker-broad-v1-qint8Broad CPU q8 siblingSee temsa/search-reranker-broad-v1ONNX q8 l160: proxy 0.9458 / 8.41 qpsoffice 0.8056; hard-k10 0.9815; holdout-a03 0.8759
temsa/search-reranker-irishgov-l6-fast-v1Fast stage-1 / cascade prefilterPT l192: proxy 0.9192 / 7.99 qpsONNX q8 l128: proxy 0.9218 / 27.25 qpsoffice 1.0000; holdout-a03 0.9259
temsa/search-reranker-irishgov-l6-fast-v2Fast K=10 policy serving releaseSame raw checkpoint family as v1; q8 with corrected temporal + office policy is the recommended pathONNX q8 l160/t10: corrected holdout-v5 1.0000 / 47.68 qpsoffice-holdout-v3 1.0000; office-valid 1.0000; legacy-holdout-v4 0.9375
temsa/search-reranker-irishgov-l6-fast-v3Fastest public K=10 serving profileSame raw checkpoint family as v2; the value is the shorter recommended serving length on corrected gatesONNX q8 l128/t10: corrected holdout-v5 1.0000 / 48.27 qpsoffice-holdout-v3 1.0000; office-valid 1.0000; legacy-holdout-v4 0.9444
temsa/search-reranker-irishgov-l6-fast-v4Current best fast K=10 rerankerMargin-MSE style continuation over v3; q8 per-channel is the recommended deployed artifactONNX q8 per-channel l128/t10: corrected holdout-v5 1.0000 / 50.78 qpsoffice-holdout-v3 1.0000; office-valid 1.0000; legacy-holdout-v4 0.9444
temsa/search-reranker-irishgov-l6-fast-v5Fast K=10 serving release with shorter broad-policy routeSame raw checkpoint family as v4; the value is a shorter broad-policy serving profile while keeping the office route unchangedONNX q8 per-channel gov_broad_v1 l104/t10: corrected holdout-v5 1.0000 / 55.77 qpsfresh-holdout-v6 0.8917; office-holdout-v3 1.0000; office-valid 1.0000
temsa/search-reranker-irishgov-l5-k10-v1Fast K=10 direct rerankerPT l160: proxy 0.8800 / 1.32 qpsONNX q8 l140: proxy 0.8872 / 28.72 qpsoffice 1.0000; hard-k10 0.9815; holdout-a03 0.9630
temsa/search-reranker-irishgov-l5-k10-v2Current K=10 successorPT l128: office 1.0000, finephrase 0.9405ONNX q8 l140: proxy 0.8853 / 28.27 qpsoffice 1.0000; holdout-a03 1.0000

Policy rerankers

RepoPrimary roleNon-quantized pathQuantized pathExtra trustworthy signals
temsa/search-reranker-broad-policy-v1Broad policy-tuned rerankerPT l224: policy-all 0.9270 / 7.94 qpsONNX q8 l224: policy-all 0.9205 / 27.55 qpsoffice 0.9537; holdout-a04 0.9049
temsa/search-reranker-broad-policy-v3Current broad policy successorONNX fp32 l224: policy-all 0.9259 / 15.75 qpsONNX q8 reduce_range l224: policy-all 0.9268 / 30.12 qpsoffice 0.9676; holdout-v3 0.9286
temsa/search-reranker-broad-policy-v4Current broad policy serving releaseSame raw checkpoint family as v3; q8 gov_broad_v1 is the recommended pathONNX q8 reduce_range + gov_broad_v1 l224: policy-all 0.9257 / 31.64 qpsoffice 0.9676; holdout-v3 0.9271; holdout-v4 0.9583
temsa/search-reranker-broad-policy-v5Current broad policy serving releaseSame raw checkpoint family as v4; q8 gov_broad_v1 is the recommended pathONNX q8 reduce_range + gov_broad_v1 l224/t10: policy-all 0.9711 / 26.12 qpsoffice 1.0000; holdout-v3 1.0000; holdout-v4 1.0000
temsa/search-reranker-broad-policy-v6Broad policy serving release with corrected temporal gateSame raw checkpoint family as v5; q8 gov_broad_v1 + office_holder_v1 is the recommended pathONNX q8 gov_broad_v1 l176/t10: corrected holdout-v5 0.8657 / 25.74 qpsoffice-l160 1.0000; legacy-holdout-v4 0.9444; legacy-policy-all 0.9167
temsa/search-reranker-broad-policy-v7Broad policy serving release with stronger latest-turn and topic-specific news routingSame raw checkpoint family as v6; q8 gov_broad_v1 + office_holder_v1 is the recommended pathONNX q8 gov_broad_v1 l176/t10: fresh holdout-v6 0.9375 / 15.65 qpsoffice-l224 1.0000; office-holdout-v4 0.9659; corrected-holdout-v5 1.0000; legacy-policy-all 0.9196
temsa/search-reranker-broad-policy-v8Broad policy serving-profile release with shorter broad and office routesSame raw checkpoint family as v7; q8 gov_broad_v1 + office_holder_v1 is the recommended pathONNX q8 gov_broad_v1 l160/t10: fresh holdout-v7 0.9500 / 29.85 qpsoffice-l208 1.0000; office-holdout-v3 1.0000; office-holdout-v4 0.9659; fresh-holdout-v6 0.9500
temsa/search-reranker-broad-policy-v9Broad policy serving release with stronger year-specific change-history routingSame raw checkpoint family as v8; q8 gov_broad_v1 + office_holder_v1 is the recommended pathONNX q8 gov_broad_v1 l160/t10: gov.ie category-policy corrected 1.0000 / 26.01 qpslegacy-policy-all 0.9282; fresh-holdout-v6 0.9500; office-valid 1.0000; office-holdout-v4 0.9659

Dynamic q8 CPU at K=20

These rows use the current local K=20 benchmark harness:

  • proxy_k20: policy=none
  • broad_policy_k20: policy=gov_broad_v1
  • office_holder_k20: policy=office_holder_v1
  • fixed threads=10, batch_size=32
RepoBroad lenOffice lenProxy K=20Broad-policy K=20Office-holder K=20Notes
temsa/search-reranker-broad-v11601600.9458 / 6.93 qps0.9437 / 9.10 qps0.6073 / 8.23 qpsbroad baseline
temsa/search-reranker-broad-v1-qint81601600.9458 / 6.65 qps0.9437 / 6.62 qps0.6073 / 5.91 qpsq8 sibling repo
temsa/search-reranker-broad-policy-v12242240.9414 / 7.20 qps0.9125 / 11.32 qps0.6966 / 6.49 qpsfirst policy model
temsa/search-reranker-broad-policy-v22242240.9414 / 6.44 qps0.9125 / 9.40 qps0.6966 / 7.75 qpsoffice-policy serving fix era
temsa/search-reranker-broad-policy-v32242240.9364 / 7.38 qps0.9250 / 12.20 qps0.7451 / 7.15 qpscustom CPU continuation
temsa/search-reranker-broad-policy-v42242240.9364 / 7.16 qps0.9250 / 11.40 qps0.7451 / 6.90 qpsgov_broad_v1 serving route
temsa/search-reranker-broad-policy-v52242240.9364 / 7.00 qps0.9250 / 12.35 qps0.7451 / 6.47 qpsstronger serving release
temsa/search-reranker-broad-policy-v61761600.9433 / 8.09 qps0.9250 / 9.97 qps0.7186 / 9.77 qpscorrected temporal gate
temsa/search-reranker-broad-policy-v71762240.9433 / 7.91 qps0.9250 / 12.11 qps0.7451 / 7.49 qpsstronger latest-turn routing
temsa/search-reranker-broad-policy-v81602080.9371 / 9.49 qps0.9250 / 11.21 qps0.7527 / 7.01 qpscurrent broad fallback
temsa/search-reranker-broad-policy-v91602080.9371 / 8.97 qps0.9250 / 11.56 qps0.7527 / 6.62 qpscurrent broad fallback + change-history fix
temsa/search-reranker-irishgov-l5-k10-v11401400.8872 / 15.56 qps0.8938 / 21.68 qps0.6751 / 21.01 qpsfast K=10 direct
temsa/search-reranker-irishgov-l5-k10-v21401400.8853 / 18.06 qps0.8854 / 18.87 qps0.6327 / 17.93 qpsfast K=10 successor
temsa/search-reranker-irishgov-l6-fast-v11281280.9286 / 18.70 qps0.9042 / 17.65 qps0.6934 / 20.36 qpsfast stage-1 v1
temsa/search-reranker-irishgov-l6-fast-v21281280.9286 / 18.59 qps0.9042 / 19.67 qps0.6934 / 19.30 qpsfast stage-1 v2
temsa/search-reranker-irishgov-l6-fast-v31281280.9286 / 18.48 qps0.9042 / 18.60 qps0.6934 / 19.30 qpsshorter serving profile
temsa/search-reranker-irishgov-l6-fast-v41281280.9184 / 17.66 qps0.9008 / 21.83 qps0.7197 / 17.31 qpsmargin-MSE per-channel
temsa/search-reranker-irishgov-l6-fast-v51041280.8987 / 20.85 qps0.9133 / 20.29 qps0.7197 / 15.45 qpscurrent fast route

Intentional gaps:

  • search-reranker-broad-v1: the local reports include strong fp32 ONNX proxy and office data, but not a matching fp32 in-domain finephrase / hard-K10 / holdout-A03 set, so those are not claimed here.
  • search-reranker-irishgov-l5-k10-v2: the local non-quantized reports are trustworthy for office / finephrase / hard-K10, but not for the same proxy runtime shape as the shipped q8 path.
  • search-reranker-irishgov-l6-fast-v1: the local non-quantized reports cover proxy and office, but not the fresh holdout-A03 slice used for the q8 K=10 comparison.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · text-classification

Можно запустить

Подбираем GPU…

Класс архитектуры
XLMRobertaForSequenceClassification
Ревизия весов
0f6379b

0 моделей