/ Модель

Характеристики

Контекст
262 144 токена
Размер весов
7,3 ГБ
Лицензия
Своя лицензия
Архитектура
NemotronH_Nano_Omni_Reasoning_V3 · dense
Библиотека
mlx
Опубликована
1 сен 2026

Nemotron-3-Nano-Omni-30B-A3B-Reasoning-BF16-MLX-Native

Генерация текстаТекст → текст13 профессий

Нативная BF16-конверсия мультимодальной модели NVIDIA Nemotron-3-Nano-Omni для инференса через Swift/MLX на Apple Silicon.

80скачиваний за 30 дней0лайковвеса обновлены1 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Это конвертированное представление мультимодальной модели NVIDIA Nemotron-3-Nano-Omni-30B-A3B-Reasoning для нативного инференса через Swift/MLX на компьютерах Apple Silicon. В репозитории сохранены веса BF16 исходной модели: значения тензоров не квантизировались, не округлялись и не обучались заново; изменена раскладка экспертных тензоров для пути MLX gather-matmul. Размер весов составляет около 66,03 ГБ.

Модель предназначена для диалоговой работы и рассуждений с текстом, изображениями, аудио и видео; базовая карточка указывает сценарии транскрибации, OCR, суммаризации и обработки документов. Репозиторий поддерживает интерфейс вызова инструментов, но использует специальный нативный формат checkpoint и рассчитан на Nemotron Omni Swift/MLX runtime; он не является готовым checkpoint для Transformers. Лицензия указана как other, поэтому условия использования следует сверять с лицензией исходной модели NVIDIA.

Сценарии применения

  • ответы на вопросы по изображениям и документам
  • распознавание текста на изображениях и OCR
  • транскрибация аудио
  • суммаризация аудио- и видеоматериалов
  • диалоговое рассуждение по текстовым и мультимодальным данным
  • вызов инструментов в диалоговом приложении

Ограничения

Требуется нативный Nemotron Omni Swift/MLX runtime на Apple Silicon; checkpoint не совместим напрямую с Transformers. Весовой payload около 66,03 ГБ, а в предоставленных данных не перечислены поддерживаемые естественные языки.

Для каких профессий подходит13

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Nemotron 3 Nano Omni 30B-A3B Reasoning BF16 — MLX Native

This is a lossless storage-layout conversion of NVIDIA's Nemotron-3-Nano-Omni-30B-A3B-Reasoning-BF16 checkpoint for native Swift/MLX inference on Apple Silicon.

The conversion does not quantize, round, train, or otherwise change tensor values. Every BF16 parameter payload is copied byte-for-byte and stored once:

  • model-00001-of-00017.safetensors through model-00017-of-00017.safetensors contain the non-expert tensors under their upstream keys.
  • experts-bf16.safetensors contains the routed expert tensors stacked into the physical layout consumed by the native MLX gather-matmul path.
  • model.safetensors.index.json indexes only the non-expert shards.
  • mere-run-native-checkpoint.json records the source revision and exact payload inventory.

The resulting checkpoint contains approximately 66.03 GB of model weights. It replaces the older workflow that retained the 66.03 GB upstream checkpoint and generated a second 58.75 GB expert cache at first launch.

Provenance

  • Source repository: nvidia/Nemotron-3-Nano-Omni-30B-A3B-Reasoning-BF16
  • Source revision: 24e67ea000b7c2837fc8f9488aa2008524fac8ba
  • Native checkpoint format: mere-run-nemotron-omni-native-v1
  • Precision: BF16
  • Total weight payload: 66,031,270,520 bytes
  • Expert payload: 58,749,616,128 bytes
  • Non-expert payload: 7,281,654,392 bytes

Runtime

This repository uses a native expert layout and is not a drop-in Transformers checkpoint. It is consumed directly by the Nemotron Omni Swift/MLX runtime in mere.run.

The runtime supports text, image, audio, and video inputs with text output. It requires an Apple Silicon Mac with at least 112 GB unified memory; 128 GB is recommended.

License

The model remains governed by the NVIDIA Open Model Agreement. Review LICENSE.pdf, NOTICE, the upstream model card, and the accompanying safety, privacy, bias, and explainability documentation before use or redistribution.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · mlx

Нельзя запустить

MLX-модели работают только на Apple Silicon.

Класс архитектуры
NemotronH_Nano_Omni_Reasoning_V3
Ревизия весов
9256528

0 моделей