/ Модель

Характеристики

Контекст
12 288 токенов
Лицензия
Apache 2.0
Архитектура
neo_chat · dense
Библиотека
transformers
Опубликована
19 авг 2026

SenseNova-U1.5-8B-MoT-SFT

Генерация текстаТекст → текст5 профессий

Мультимодальная модель SenseNova для генерации и редактирования изображений по тексту и визуальным примерам.

238скачиваний за 30 дней26лайковвеса обновлены15 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

SenseNova-U1.5-8B-MoT-SFT — мультимодальная модель SenseNova для генерации и редактирования изображений по текстовым инструкциям и визуальным примерам. Это вариант с supervised fine-tuning из семейства SenseNova-U1.5, построенный на NEO-unify; карточка указывает архитектуру NEOChat и размер 8B в названии. Модель принимает текст и изображения, а выдаёт изображения; официальная карточка также обозначает её как any-to-any. Для запуска предусмотрена реализация на Transformers, а веса опубликованы в формате safetensors.

Модель подходит для создания иллюстраций, постеров, инфографики и брендовых материалов, а также для локального редактирования изображений, вставки и замены объектов. Она следует сложным инструкциям с ограничениями по композиции, числу объектов и пространственным отношениям, поддерживает контроль областей через рамки и визуальные маркеры, а также нативную генерацию до 4K. Заявлены английский и китайский языки; модель особенно ориентирована на визуальные задачи с текстом на этих языках.

Известные ограничения: надписи, особенно мелкие, длинные и смешанные китайско-английские, могут содержать ошибки; сложная верстка, точные количества объектов, детали людей и редактирование с множеством областей могут быть нестабильны. Лицензия — Apache-2.0.

Сценарии применения

  • создание изображений по текстовому описанию
  • редактирование изображения по инструкции
  • создание постеров и инфографики с надписями
  • генерация изображений высокого разрешения до 4K
  • замена или вставка объектов с сохранением остального изображения
  • управление композицией с помощью областей и визуальных маркеров

Ограничения

Мелкий, длинный и смешанный китайско-английский текст на изображениях может содержать ошибки; точная верстка, детали людей и сложное редактирование с несколькими областями могут быть нестабильны.

Для каких профессий подходит5

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

SenseNova-U1.5-8B-MoT

Overview

SenseNova-U1.5-8B-MoT is our latest native unified multimodal checkpoint for more accurate, consistent, reliable, and aesthetically compelling visual creation. Built on NEO-unify, it strengthens the patchify layers, data quality and distribution, task formulation, prompt enhancement, and post-training pipeline.

The official release focuses on six user-visible improvements:

  • Higher-quality image generation: improved composition and color harmony, with more realistic material rendering, natural lighting, stronger visual fidelity, and finer local details.
  • Better text rendering and infographic generation: more legible Chinese and English text, with clearer information hierarchy in posters, infographics, brand assets, and other text-dense designs.
  • More efficient native 4K generation: more coherent global structure, color harmony, and stable high-resolution output with improved generation efficiency.
  • More reliable native image editing: stronger preservation of subject identity and unedited content across local, text, multi-reference, insertion, and replacement edits.
  • Stronger complex-instruction following: more consistent execution of object counts, spatial relationships, layouts, styles, and multiple constraints within a single request.
  • More precise visual control: more accurate region- and object-level control through bounding boxes, visual markers, and single- or multi-image references.

Showcases

Key Benchmarks

Quick Start

The reference inference implementation is available in the SenseNova-U1 GitHub repository.

Installation

git clone https://github.com/OpenSenseNova/SenseNova-U1.git
cd SenseNova-U1
uv sync
source .venv/bin/activate

The upstream environment uses Python 3.11, PyTorch 2.8, and CUDA 12.8. For other CUDA versions and optional FlashAttention configurations, see the installation guide.

Text-to-Image

python examples/t2i/inference.py \
  --model_path sensenova/SenseNova-U1.5-8B-MoT \
  --prompt "A cinematic mountain lake at sunrise, realistic photography." \
  --width 2048 --height 2048 \
  --device_map auto \
  --output output.png

Image Editing

python examples/editing/inference.py \
  --model_path sensenova/SenseNova-U1.5-8B-MoT \
  --image input.png \
  --prompt "Change the jacket to cobalt blue. Preserve the face, pose, background, lighting, and framing." \
  --output edited.png

See the inference examples for more options, supported resolutions, and batch processing.

Best Practices

Direct natural-language prompts work well for clear tasks with few constraints. For complex generation or editing, use prompt enhancement when additional planning is needed and explicitly specify what should remain unchanged.

See the SenseNova-U1.5 Cookbook for setup instructions and optional Image PE, Caption-to-Prompt, and Editing PE recipes.

🌐 Use with SenseNova-Studio

The fastest way to experience SenseNova-U1.5 is through SenseNova-Studio — a 🆓 free online playground where you can try the model directly in your browser, no installation or GPU required.

Ongoing Improvements

The official release improves upon the Preview, though challenges remain in:

  • Over-emphasized details or colors: some prompts may produce excessive high-frequency detail or oversaturated colors, which can often be mitigated by lowering cfg_scale.
  • Dense text errors: dense, lengthy, small, or mixed Chinese-English text may contain errors.
  • Constrained layouts: exact counts, alignment, or hierarchy may be imperfect in highly constrained layouts.
  • Unstable human details: small faces, hands, limbs, and fine-grained object structures may remain unstable.
  • Complex editing drift: broad, multi-turn, or multi-reference edits may drift, especially when many regions must be preserved simultaneously.

Models

ModelStageHF Weights
SenseNova-U1.5-8B-MoTFinal🤗 Model
SenseNova-U1.5-8B-MoT-SFTSupervised fine-tuning🤗 Model

🌐 Join the Community!

Join our growing community to share feedback, get support, and stay updated on the latest SenseNova-U1 developments — we'd love to hear from you!

Citation

If this project is helpful for your research, please consider starring the repository and citing:

@misc{sensenova2026neounify,
  title        = {NEO-unify: Building Native Multimodal Unified Models End to End},
  author       = {SenseNova},
  journal      = {Hugging Face blog},
  url          = {https://huggingface.co/blog/sensenova/neo-unify},
  year         = {2026}
}

@article{sensenova2026sensenovau1,
  title        = {SenseNova-U1: Unifying Multimodal Understanding and Generation with NEO-unify Architecture},
  author       = {Diao, Haiwen and Wu, Penghao and Deng, Hanming and Wang, Jiahao and Bai, Shihao and Wu, Silei and Fan, Weichen and Ye, Wenjie and Tong, Wenwen and Fan, Xiangyu and others},
  journal      = {arXiv preprint arXiv:2605.12500},
  year         = {2026}
}

@article{sensenova2026sensenovau1.5,
  title        = {SenseNova-U1. 5: Towards Native Unified Visual Intelligence},
  author       = {Diao, Haiwen and Wang, Jiahao and Ding, Chenjing and Deng, Hanming and Chen, Jiangnan and Zhang, Ruixi and Wang, Ruohui and Tong, Wenwen and Fan, Xiangyu and Wang, Yubo and others},
  journal      = {arXiv preprint arXiv:2609.11929},
  year         = {2026}
}

License

This model is released under the Apache 2.0 License.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Нельзя запустить

Модели нужен код из репозитория; автор пока не в списке доверенных организаций.

Класс архитектуры
NEOChatModel
Ревизия весов
0d62258

0 моделей