/ Модель

Характеристики

Лицензия
Своя лицензия
Библиотека
transformers
Опубликована
20 авг 2026

Nemotron-3-Nano-Omni-AEON-Ultimate-Uncensored-BF16-Q3_K_M-GGUF

Мультимодальная модель4 профессии

Квантованная сборка Nemotron-3-Nano-Omni-AEON-Ultimate-Uncensored-BF16 в GGUF для запуска диалоговой мультимодальной модели через llama.cpp.

490скачиваний за 30 дней3лайкавеса обновлены22 авг 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Это квантованная версия Nemotron-3-Nano-Omni-AEON-Ultimate-Uncensored-BF16 от NVIDIA/AEON-7, опубликованная kainecorneko в формате GGUF для запуска через llama.cpp. Исходная модель настроена для диалога и следования инструкциям; в метаданных заявлена мультимодальная задача any-to-any и поддержка английского языка.

Карточка этой версии описывает конвертацию исходных весов в GGUF, но не уточняет параметры квантования или размер модели. Метаданные указывают формат GGUF BF16. Репозиторий базовой модели связан с этой моделью как finetune; лицензия указана как other, поэтому перед использованием следует проверить условия в карточке исходной модели.

Сценарии применения

  • диалоговые ответы и выполнение инструкций на английском языке
  • локальный запуск мультимодальной модели через llama.cpp
  • использование модели в приложениях с интерфейсом чата

Ограничения

В README этой сборки не приведены подробности о размере, контекстном окне и точном формате квантования; сведения о поведении и возможностях следует сверять с карточкой исходной модели. Лицензия обозначена как other, поэтому её условия требуют проверки.

Для каких профессий подходит4

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

kainecorneko/Nemotron-3-Nano-Omni-AEON-Ultimate-Uncensored-BF16-Q3_K_M-GGUF

This model was converted to GGUF format from AEON-7/Nemotron-3-Nano-Omni-AEON-Ultimate-Uncensored-BF16 using llama.cpp via the ggml.ai's GGUF-my-repo space. Refer to the original model card for more details on the model.

Use with llama.cpp

Install llama.cpp through brew (works on Mac and Linux)

brew install llama.cpp

Invoke the llama.cpp server or the CLI.

CLI:

llama-cli --hf-repo kainecorneko/Nemotron-3-Nano-Omni-AEON-Ultimate-Uncensored-BF16-Q3_K_M-GGUF --hf-file nemotron-3-nano-omni-aeon-ultimate-uncensored-bf16-q3_k_m.gguf -p "The meaning to life and the universe is"

Server:

llama-server --hf-repo kainecorneko/Nemotron-3-Nano-Omni-AEON-Ultimate-Uncensored-BF16-Q3_K_M-GGUF --hf-file nemotron-3-nano-omni-aeon-ultimate-uncensored-bf16-q3_k_m.gguf -c 2048

Note: You can also use this checkpoint directly through the usage steps listed in the Llama.cpp repo as well.

Step 1: Clone llama.cpp from GitHub.

git clone https://github.com/ggerganov/llama.cpp

Step 2: Move into the llama.cpp folder and build it with LLAMA_CURL=1 flag along with other hardware-specific flags (for ex: LLAMA_CUDA=1 for Nvidia GPUs on Linux).

cd llama.cpp && LLAMA_CURL=1 make

Step 3: Run inference through the main binary.

./llama-cli --hf-repo kainecorneko/Nemotron-3-Nano-Omni-AEON-Ultimate-Uncensored-BF16-Q3_K_M-GGUF --hf-file nemotron-3-nano-omni-aeon-ultimate-uncensored-bf16-q3_k_m.gguf -p "The meaning to life and the universe is"

or

./llama-server --hf-repo kainecorneko/Nemotron-3-Nano-Omni-AEON-Ultimate-Uncensored-BF16-Q3_K_M-GGUF --hf-file nemotron-3-nano-omni-aeon-ultimate-uncensored-bf16-q3_k_m.gguf -c 2048

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Нельзя запустить

Any-to-any модели пока не поддерживаются.

Ревизия весов
4a886a6

0 моделей