/ Модель

Характеристики

Контекст
12 288 токенов
Размер весов
35,1 ГБ
Лицензия
Apache 2.0
Архитектура
neo_chat · dense
Библиотека
transformers
Опубликована
19 авг 2026

SenseNova-U1.5-8B-MoT

Генерация текстаТекст → текст3 профессии

Мультимодальная модель SenseNova для генерации изображений по тексту и редактирования изображений с точным управлением содержимым и композицией.

4 273скачиваний за 30 дней263лайкавеса обновлены15 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

SenseNova-U1.5-8B-MoT — мультимодальная модель SenseNova на архитектуре NEO-unify, представленная как релиз с обучением на основе RL. Она предназначена для генерации изображений по тексту и редактирования изображений по инструкциям, включая локальные изменения, вставку и замену объектов, работу с несколькими референсами и управление областями через рамки и визуальные маркеры. Модель также поддерживает чат и интерфейс вызова инструментов; веса опубликованы в формате safetensors, лицензия — Apache 2.0.

Среди заявленных улучшений — композиция и цветовая гармония, детализация, генерация изображений с разрешением до 4K, отображение английского и китайского текста, следование сложным ограничениям и сохранение неизменённых частей изображения. Карточка ориентирует модель на визуальное создание и редактирование; метаданные также относят её к задачам генерации текста и any-to-any. README не приводит число параметров или длину контекста.

Ограничения включают ошибки в мелком и плотном тексте, неточности в строго заданных компоновках и количестве объектов, нестабильность мелких деталей людей и объектов, а также дрейф при сложном многошаговом редактировании. Некоторые запросы могут приводить к чрезмерной детализации или перенасыщенным цветам.

Сценарии применения

  • создание изображений и иллюстраций по текстовым запросам
  • генерация плакатов, инфографики и брендовых материалов с текстом
  • создание изображений высокого разрешения до 4K
  • локальная замена или вставка объектов на изображении
  • редактирование изображения с сохранением заданных областей и деталей
  • генерация изображений по одному или нескольким референсам

Ограничения

Мелкий, плотный или смешанный китайско-английский текст может содержать ошибки, а строго заданные компоновки и точное число объектов — выполняться неточно. Мелкие детали людей и объектов могут быть нестабильны; при сложном многошаговом редактировании возможен дрейф, а цвета и детали иногда оказываются чрезмерно выраженными.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

SenseNova-U1.5-8B-MoT

Overview

SenseNova-U1.5-8B-MoT is our latest native unified multimodal checkpoint for more accurate, consistent, reliable, and aesthetically compelling visual creation. Built on NEO-unify, it strengthens the patchify layers, data quality and distribution, task formulation, prompt enhancement, and post-training pipeline.

The official release focuses on six user-visible improvements:

  • Higher-quality image generation: improved composition and color harmony, with more realistic material rendering, natural lighting, stronger visual fidelity, and finer local details.
  • Better text rendering and infographic generation: more legible Chinese and English text, with clearer information hierarchy in posters, infographics, brand assets, and other text-dense designs.
  • More efficient native 4K generation: more coherent global structure, color harmony, and stable high-resolution output with improved generation efficiency.
  • More reliable native image editing: stronger preservation of subject identity and unedited content across local, text, multi-reference, insertion, and replacement edits.
  • Stronger complex-instruction following: more consistent execution of object counts, spatial relationships, layouts, styles, and multiple constraints within a single request.
  • More precise visual control: more accurate region- and object-level control through bounding boxes, visual markers, and single- or multi-image references.

Showcases

Key Benchmarks

Quick Start

The reference inference implementation is available in the SenseNova-U1 GitHub repository.

Installation

git clone https://github.com/OpenSenseNova/SenseNova-U1.git
cd SenseNova-U1
uv sync
source .venv/bin/activate

The upstream environment uses Python 3.11, PyTorch 2.8, and CUDA 12.8. For other CUDA versions and optional FlashAttention configurations, see the installation guide.

Text-to-Image

python examples/t2i/inference.py \
  --model_path sensenova/SenseNova-U1.5-8B-MoT \
  --prompt "A cinematic mountain lake at sunrise, realistic photography." \
  --width 2048 --height 2048 \
  --device_map auto \
  --output output.png

Image Editing

python examples/editing/inference.py \
  --model_path sensenova/SenseNova-U1.5-8B-MoT \
  --image input.png \
  --prompt "Change the jacket to cobalt blue. Preserve the face, pose, background, lighting, and framing." \
  --output edited.png

See the inference examples for more options, supported resolutions, and batch processing.

Best Practices

Direct natural-language prompts work well for clear tasks with few constraints. For complex generation or editing, use prompt enhancement when additional planning is needed and explicitly specify what should remain unchanged.

See the SenseNova-U1.5 Cookbook for setup instructions and optional Image PE, Caption-to-Prompt, and Editing PE recipes.

🌐 Use with SenseNova-Studio

The fastest way to experience SenseNova-U1.5 is through SenseNova-Studio — a 🆓 free online playground where you can try the model directly in your browser, no installation or GPU required.

Ongoing Improvements

The official release improves upon the Preview, though challenges remain in:

  • Over-emphasized details or colors: some prompts may produce excessive high-frequency detail or oversaturated colors, which can often be mitigated by lowering cfg_scale.
  • Dense text errors: dense, lengthy, small, or mixed Chinese-English text may contain errors.
  • Constrained layouts: exact counts, alignment, or hierarchy may be imperfect in highly constrained layouts.
  • Unstable human details: small faces, hands, limbs, and fine-grained object structures may remain unstable.
  • Complex editing drift: broad, multi-turn, or multi-reference edits may drift, especially when many regions must be preserved simultaneously.

Models

ModelStageHF Weights
SenseNova-U1.5-8B-MoTRL🤗 Model
SenseNova-U1.5-8B-MoT-SFTSupervised fine-tuning🤗 Model

🌐 Join the Community!

Join our growing community to share feedback, get support, and stay updated on the latest SenseNova-U1 developments — we'd love to hear from you!

Citation

If this project is helpful for your research, please consider starring the repository and citing:

@misc{sensenova2026neounify,
  title        = {NEO-unify: Building Native Multimodal Unified Models End to End},
  author       = {SenseNova},
  journal      = {Hugging Face blog},
  url          = {https://huggingface.co/blog/sensenova/neo-unify},
  year         = {2026}
}

@article{sensenova2026sensenovau1,
  title        = {SenseNova-U1: Unifying Multimodal Understanding and Generation with NEO-unify Architecture},
  author       = {Diao, Haiwen and Wu, Penghao and Deng, Hanming and Wang, Jiahao and Bai, Shihao and Wu, Silei and Fan, Weichen and Ye, Wenjie and Tong, Wenwen and Fan, Xiangyu and others},
  journal      = {arXiv preprint arXiv:2605.12500},
  year         = {2026}
}

@article{sensenova2026sensenovau1.5,
  title        = {SenseNova-U1. 5: Towards Native Unified Visual Intelligence},
  author       = {Diao, Haiwen and Wang, Jiahao and Ding, Chenjing and Deng, Hanming and Chen, Jiangnan and Zhang, Ruixi and Wang, Ruohui and Tong, Wenwen and Fan, Xiangyu and Wang, Yubo and others},
  journal      = {arXiv preprint arXiv:2609.11929},
  year         = {2026}
}

License

This model is released under the Apache 2.0 License.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Нельзя запустить

Модели нужен код из репозитория; автор пока не в списке доверенных организаций.

Класс архитектуры
NEOChatModel
Ревизия весов
9feeeab

0 моделей