/ Модель

Характеристики

Лицензия
Apache 2.0
Библиотека
diffusers
Опубликована
28 июл 2026

next-forcing-posttrain-robotwin

Языковая модельИзображение, текст → action

Постобученная модель Next Forcing предсказывает видео и действия робота с учётом долгосрочной динамики и предназначена для задач робототехники, включая RoboTwin 2.0.

0скачиваний за 30 дней0лайковвеса обновлены16 авг 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Next Forcing — это постобученная модель для робототехники, созданная на основе gangweix/next-forcing-base в кодовой базе LingBot-VA. Она предназначена для предсказания будущих видеокадров и действий робота с учётом длительной динамики сцены и оценивалась на бенчмарке RoboTwin 2.0.

Модель использует 6,7 млрд параметров в формате BF16, 30 слоёв основного трансформера и модули Multi-Chunk Prediction (MCP) для причинного предсказания нескольких будущих фрагментов. В RoboTwin 2.0 она показала среднюю успешность 94,1% в чистых условиях и 93,5% при случайных возмущениях. Репозиторий содержит компоненты трансформера, VAE, текстовый энкодер и токенизатор; для использования нужны код и зависимости проекта. Лицензия — Apache-2.0.

Сценарии применения

  • предсказание будущих видеокадров в сценах робототехники
  • прогнозирование долгосрочной динамики сцены для управления роботом
  • планирование действий робота по визуальному контексту
  • оценка стратегий управления на бенчмарке RoboTwin 2.0

Ограничения

Результаты описаны для бенчмарка RoboTwin 2.0 и не гарантируют аналогичную успешность в других средах. Для запуска необходимы код и зависимости проекта.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Next Forcing — RoboTwin Post-trained Checkpoint

Post-trained checkpoint for Next Forcing: Causal World Modeling with Multi-Chunk Prediction, evaluated on the RoboTwin 2.0 benchmark.

Model Description

Next Forcing addresses the myopic supervision problem in autoregressive video world models: next-chunk denoising tends to learn local appearance shortcuts instead of long-range dynamics, especially at high frame rates. Lightweight Multi-Chunk Prediction (MCP) modules predict multiple future chunks through a causal chain during training, providing dense temporal supervision to the backbone.

This checkpoint is the RoboTwin post-trained model, built on top of the LingBot-VA codebase. It was post-trained from gangweix/next-forcing-base.

Parameters6.7B (BF16)
Backbone layers30
MCP depths3 (mcp_blocks_per_depth=3, collect layers [3, 11, 19, 29])
BenchmarkRoboTwin 2.0, 50 bimanual manipulation tasks
Initialized fromnext-forcing-base (5.1B)

Results

Average success rate on RoboTwin 2.0:

SettingLingBot-VANext Forcing
Clean92.994.1
Random91.593.5

Repository Layout

transformer/     Next Forcing backbone with MCP modules (enable_mcp=true)
vae/
text_encoder/
tokenizer/

Usage

Clone the code and install the dependencies as described in the repository README.

python -m pip install "huggingface_hub[cli]"
hf download gangweix/next-forcing-posttrain-robotwin \
  --local-dir ./checkpoints/next-forcing-posttrain-robotwin

The evaluation code resolves model subfolders by path, so point NEXT_FORCING_MODEL_PATH at the local directory, not at the Hub repository id:

export NEXT_FORCING_MODEL_PATH=$PWD/checkpoints/next-forcing-posttrain-robotwin
export ROBOTWIN_ROOT=/path/to/your/RoboTwin

# Start the inference server on one GPU
CUDA_VISIBLE_DEVICES=0 bash evaluation/robotwin/launch_server.sh

# In another terminal, evaluate one task for 100 trials
bash evaluation/robotwin/launch_client.sh /path/to/eval_results adjust_bottle

RoboTwin evaluation requires a working RoboTwin 2.0 installation; see the official guide.

License

Released under the Apache License 2.0. Next Forcing is developed on top of the LingBot-VA codebase; please retain the upstream attribution and license when redistributing.

Citation

@article{xu2026next,
  title={Next Forcing: Causal World Modeling with Multi-Chunk Prediction},
  author={Xu, Gangwei and Zhang, Qihang and Zhou, Jiaming and Zhu, Xing and Shen, Yujun and Yang, Xin and Xu, Yinghao},
  journal={arXiv preprint arXiv:2606.11187},
  year={2026}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · diffusers

Нельзя запустить

Модели для роботов не запускаются как сервис инференса.

Ревизия весов
4c47db4

0 моделей