/ Модель

Характеристики

Лицензия
Своя лицензия
Базовая модель
Qwen3-Omni-30B-A3B-Instruct
Библиотека
transformers
Опубликована
27 сен 2026

aplomb-1-omni

Классификация без дообученияТекст → label

Мультимодальная модель EmpirioLabs AI, которая классифицирует и оценивает текст и медиа, выдавая вероятности и уверенность без генерации свободного текста.

0скачиваний за 30 дней0лайковвеса обновлены28 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Aplomb 1 Omni — мультимодальная модель EmpirioLabs AI для принятия решений по тексту, JSON и медиа. Она дообучена на Qwen/Qwen3-Omni-30B-A3B-Instruct и возвращает распределения вероятностей с оценкой уверенности для вопросов типа «да/нет», выбора из вариантов, упорядоченной оценки или выбора инструмента. Ответы на разные вопросы формируются независимо; свободный текст модель не генерирует.

Модель предназначена для классификации и оценивания, анализа изображений, видео и аудио, а также выбора функции из заданного списка. По README, локальный запуск требует около 70 ГБ памяти ускорителя для весов bf16; контекст запроса ограничен 60 000 токенами с учётом самого длинного вопроса. Можно передать до 16 изображений, 8 аудиоклипов длительностью до 10 минут каждый и 4 видео за запрос. Указана лицензия «other», поэтому конкретные условия использования следует сверить с лицензией репозитория.

Сценарии применения

  • классификация текста по заданным категориям
  • ответы да/нет на вопросы о содержимом изображения
  • выбор варианта по видео или аудиозаписи
  • оценка объекта по упорядоченной шкале
  • выбор инструмента из списка функций
  • получение вероятностей классов с оценкой уверенности

Ограничения

Модель не генерирует свободный текст и не заполняет свободные текстовые аргументы инструментов. Для локального запуска весов bf16 требуется около 70 ГБ памяти ускорителя; запрос ограничен 60 000 токенами, 16 изображениями, 8 аудиоклипами и 4 видео.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Aplomb 1 Omni

Aplomb 1 Omni answers typed questions about text, JSON, images, video, and audio with calibrated probabilities. You send a state and a set of questions; every question comes back as a probability distribution with a confidence value, in one request, and no text is generated.

  • Question types: noul (yes or no), choice (one of 2 to 255 options), score (2 to 10 ordered levels), and tool (which function to call from a list of function tools, with distributions over its enum and boolean arguments).
  • Inputs: text, JSON objects and arrays, images, video, and audio (speech, sounds, and music). For text, images, and video only, Aplomb 1 scores higher on most benchmarks below.
  • Independent answers: questions never influence each other.

Results

Measured on 2026-09-27 with the weights in this repository, served the way the hosted model is. Accuracy is in percent; for calibration, lower is better. Aplomb 1 Omni was not trained on any benchmark below unless it is marked (a), and inputs that also appear in its training data were removed from scoring for every system. Other models were run with their own released inference code.

Audio

BenchmarkAplomb 1 Omni
MMAU (test-mini)74.3
ESC-5081.6
MMSU76.6
VocalSound (a)92.7
CREMA-D (a)79.8

Decision benchmarks (the Intern-Decision evaluation bundle)

BenchmarkAplomb 1 OmniAplomb 1Jev (c)Kev-27BIntern-Decision-4B
Jevbench Easy100.0100.0100.0100.0100.0
Jevbench Original98.697.298.6100.0100.0
Jevbench Hard62.268.572.172.171.2
Typed Decisions (a)81.081.673.374.980.9
ToolACE (a)97.196.891.389.496.5
AG News88.089.089.690.890.8
WildJailbreak92.793.596.389.990.2
Average88.589.588.788.189.9

Calibration (lower is better)

MetricAplomb 1 OmniAplomb 1Kev-27BIntern-Decision-4B
Calibration pilot, Brier0.1290.0620.0700.181
Calibration pilot, ECE0.1360.0550.0620.208
Jevbench Hard, Brier0.4840.4010.3750.415
Jevbench Hard, ECE0.1080.0540.1270.183

Text classification ((k): Kev-27B was trained on this dataset or its source)

BenchmarkAplomb 1 OmniAplomb 1Kev-27BIntern-Decision-4B
ANLI R360.061.266.254.2
SST-2 (k)96.695.696.091.6
AG News (k)85.488.891.489.4
Yelp stars (k)60.658.468.063.8
Emotion57.061.259.656.6
TREC (k)90.286.494.887.4
Banking77 (k)78.080.284.2not supported (77 options)
CLINC15082.287.682.0not supported (151 options)
HelpSteer242.542.537.528.2

Images

BenchmarkAplomb 1 OmniAplomb 1Intern-Decision-4B
POPE89.789.589.4
MMStar (first 500)67.270.065.2
MME (first 500)87.689.280.8
HallusionBench (first 500)81.082.679.4
AI2D (first 500)85.291.481.0
BLINK65.969.3not run
MMMU (first 500)63.070.257.0
Food-101 (first 500)91.089.8not supported (101 options)

Video

BenchmarkAplomb 1 OmniAplomb 1
TempCompass73.179.8
Video-MME (short)74.983.6
NExT-QA (multiple choice)83.885.6
MVBench (b)69.573.5

(a) Another split of the same dataset was used in training. (c) Jev (jev-1.13.0) figures as published by Intern-Decision for the same items. (b) 5 of its 19 subtasks use CLEVRER, whose training split was used in training.

Quickstart

curl https://api.empiriolabs.ai/v1/decisions \
  -H "Authorization: Bearer $EMPIRIOLABS_API_KEY" \
  -H "Content-Type: application/json" \
  -d '{
    "model": "aplomb-1-omni",
    "state": {
      "call": {"type": "audio", "url": "https://example.com/support-call.wav"},
      "account_tier": "business"
    },
    "questions": {
      "wants_refund": {"type": "noul", "instructions": "Does the caller ask for a refund?"},
      "tone": {"type": "score", "instructions": "How upset does the caller sound?",
               "criteria": ["Calm", "Annoyed", "Angry"]}
    }
  }'

Every answer comes back with its probabilities and a confidence value. The full request and response schema, media input, limits, and pricing are in the Decisions API guide and on the model page.

Run locally

pip install -U "transformers>=5.17" torch accelerate torchvision torchcodec
python run_aplomb.py --model empiriolabsai/aplomb-1-omni --request request.json --debias

request.json is a Decisions API request body; --debias matches the hosted API. The weights are bf16 and need about 70 GB of accelerator memory.

Limits

  • The state plus the longest question: up to 60,000 tokens.
  • Media: up to 16 images, 8 audio clips (10 minutes each), and 4 videos per request.
  • Aplomb 1 Omni does not generate text and does not fill free-text tool arguments; those are listed under open_arguments.

License

EmpirioLabs Model License 1.0. Research, education, evaluation, personal use, and internal commercial use by organizations with annual revenue under US$1 million are free. Offering the model as a hosted service, commercial use above that threshold, and distributing it in products sold to others need a commercial license: write to support@empiriolabs.ai. Using the model or its outputs to distill or train another model is not permitted. The base model is licensed under Apache 2.0; its license text and the attribution notice are in LICENSE-APACHE-2.0 and NOTICE.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers · zero-shot-classification

Нельзя запустить

Доступ к модели ограничен автором; у платформы нет доступа к весам.

Ревизия весов
0a04d2b

0 моделей