/ Модель

Характеристики

Лицензия
MIT
Базовая модель
manaca-1b-base
Опубликована
24 сен 2026

serigy-jev

Классификация текстаТекст → label

Serigy — классификатор на базе Manacá-1B, который оценивает достоверность новостных текстов на бразильском португальском.

0скачиваний за 30 дней6лайковвеса обновлены10 окт 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Serigy — классификатор новостных текстов на бразильском португальском, разработанный Wendell Barreto на основе дообученной Manacá-1B. Модель оценивает достоверность текста и относит его к одному из трёх порядковых классов: «явно ложный», «неопределённый или смешанный» и «явно истинный»; также возвращает оценку достоверности от 0 до 1. Входом служат текст и необязательное указание источника.

В README приведены результаты на тестовой выборке Fake.br: точность для сильных классов 0,980 на 1440 примерах; на наборе Lupa 2025 вне распределения — 0,836 на 200 примерах, ECE — 0,156. Для запуска используется пакет PyPI serigy: репозиторий Hugging Face содержит веса и метаданные, но не код инференса. Это открытые веса, а не полностью открытый исходный проект: обучение, датасет и кэш не входят в пакет. Лицензия — MIT.

Сценарии применения

  • проверка достоверности новостной статьи на португальском
  • предварительная сортировка публикаций по уровню правдоподобия
  • выявление явно ложных новостных утверждений
  • выделение неоднозначных или смешанных по достоверности текстов

Ограничения

Модель предназначена для бразильского португальского; вне распределения на наборе Lupa 2025 точность для сильных классов составляет 0,836, а ECE — 0,156. Репозиторий содержит веса, но для инференса требуется отдельный пакет serigy.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Serigy

Pesos do classificador local de fake news em PT-BR (sensor Manacá-1B).

ArquivoFunção
serigy_jev.safetensorsCheckpoint
serigy_jev.jsonMetadados do release

Uso: via pacote PyPI serigy — este Hub não inclui código de inferência.

Modelo de distribuição — open weights

Este release é open weights, não open source completo:

ArtefatoOndeO que libera
Pesos (.safetensors + .json)este Hubcheckpoint público
Inferência (load + predict)PyPI serigypip install → SerigyModel(...).predict(...)
Treino / FakeBR / cache—fora do wheel PyPI

Em resumo: o pacote PyPI só carrega pesos (Hub) + sensor (Hub) e faz predict. Treino não vai no pip install.


Quickstart

pip install serigy
from serigy import SerigyModel

model = SerigyModel("wendellperbar/serigy-jev")
out = model.predict(
    "Senado aprova lei que PROÍBE jogo de videogame para menores de 18 anos."
)
print(out["predicao"], out["score_final"], out["confianca_calibrada"])

Baixar só os pesos (opcional):

hf download wendellperbar/serigy --local-dir ./serigy-jev-ckpt
# model = SerigyModel("./serigy-jev-ckpt")

Se o Manacá for gated, configure HF_TOKEN.

Entrada

CampoTipoObrigatório
textostrsim
fontestr | Nonenão

Saída

{
  "predicao": "Claramente Falso",
  "classe_ordinal": 0,
  "score_final": 0.08,
  "confianca_calibrada": 0.91,
  "probabilidades": {
    "0": 0.92,
    "1": 0.06,
    "2": 0.02
  },
  "metricas": {
    "tempo_ms": 410.0,
    "input_tokens": 48
  }
}
CampoSignificado
predicaoClaramente Falso / Incerto/Misto / Claramente Verdadeiro
classe_ordinal0, 1 ou 2
score_finalveracidade 0.0…1.0
confianca_calibradaperto de 1 = mais concentrado
probabilidadesmassa em cada classe

Documentação da lib: github.com/wendellbigato/serigy-jev.


Resultados

Sensor deste release: Manacá.

CenárioAcerto (classe forte)
FakeBR test (n=1440)0.980
Lupa 2025 OOD (n=200)0.836
ECE Lupa (↓ melhor)0.156

Generalização FakeBR → Lupa

Generalização FakeBR → Lupa

Lupa 2025 — acerto (classe forte)

Benchmark Fake News 2025

Desempenho (acerto · AUC)

Desempenho

Confiabilidade

Confiabilidade

Matrizes de confusão

Matrizes de confusão

Distribuição de classes

Distribuição de classes

Concordância entre sistemas

Matriz de concordância

Latência

Latência


Créditos

@InProceedings{fakebr:18,
  author={Monteiro, Rafael A. and Santos, Roney L. S. and Pardo, Thiago A. S.
          and de Almeida, Tiago A. and Ruiz, Evandro E. S. and Vale, Oto A.},
  title={Contributions to the Study of Fake News in Portuguese:
         New Corpus and Automatic Detection Results},
  booktitle={Computational Processing of the Portuguese Language},
  year={2018},
  publisher={Springer International Publishing},
  pages={324--334}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

В репозитории нет config.json: не понять архитектуру модели.

Ревизия весов
785ef7e

0 моделей