/ Модель

Характеристики

Лицензия
CC BY-SA 4.0
Библиотека
n0vtla
Опубликована
14 сен 2026

n0_VTLA_grasp_chip

Языковая модельИзображение, текст → action

Специализированная VTLA-политика NeoteAI для управления роботом при захвате микросхемы в симуляторе NeoSim.

0скачиваний за 30 дней0лайковвеса обновлены15 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

NeoteAI выпустила N0-VTLA NeoSim Grasp Chip — специализированную политику управления роботом для задачи grasp_chip в симуляторе NeoSim. Это не предварительно обученная базовая модель: для дообучения на собственном роботе авторы рекомендуют начать с n0-vtla-base.

Модель относится к архитектуре vision-tactile-language-action (VTLA): эксперт действий на основе flow matching получает условие в виде предсказанных латентных тактильных токенов. В конфигурации включён тактильный путь с пятью латентными токенами и двумя видами tactile_a и tactile_b; пространство действий — суставные команды размерности 8. Для запуска предусмотрен горизонт действий 16, а текстовая подсказка для задачи — «grasp chip». В README сообщается о 100% успехе с первой попытки в конкретной симуляционной оценке.

Показатель получен на UniVTAC с фиксированным коммитом и на отложенных начальных состояниях; после измерений критерии успеха для задач были ужесточены, поэтому результаты нельзя напрямую сравнивать без версии симулятора. Тактильный канал присутствует, но оценка не доказывает, что он улучшает результат: модель могла справиться, игнорируя камеры и тактильные датчики. Лицензия — CC BY-SA 4.0.

Сценарии применения

  • захват микросхемы роботом в NeoSim
  • проверка политики манипуляции на отложенных состояниях симулятора
  • адаптация базовой N0-VTLA-политики для роботизированного захвата

Ограничения

Результат 100% относится к конкретной версии UniVTAC и протоколу оценки, поэтому его нельзя напрямую сопоставлять с оценками по другим версиям. Наличие тактильного канала не подтверждает его причинный вклад в успех; README также указывает, что это политика для одной задачи, а не базовая модель.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

N0-VTLA - NeoSim Grasp Chip

Task policy for N0-VTLA, a vision-tactile-language-action model that conditions a flow-matching action expert on predicted latent tactile tokens.

This is a task policy, not a pretrained base. For post-training on your own robot start from n0-vtla-base.

Configsim_single_arm_tactile
Tactile pathwayenabled, n_latent=5, views (tactile_a, tactile_b)
Action space8-dim joint

Single-task policy for the NeoSim grasp_chip task.

100%, first attempt.

Serving

action_horizon is 16, which differs from the config default, so it must be overridden:

VTLA_ASSET_ID=univtac_grasp_chip_joint_h16_norm \
python scripts/serve_zmq.py --config sim_single_arm_tactile \
  --ckpt <this-dir> --action-horizon 16 --addr "tcp://127.0.0.1:5557"

Set exec_horizon: 16 in the deploy YAML to match. Prompt: grasp chip

Evaluation protocol

Measured on the UniVTAC simulator at commit 695a22d (branch NeoSim of anlorla/UniVTAC), on held-out seeds starting at 100. Success criteria on three tasks were tightened after these numbers were measured, so a success rate on this benchmark is not comparable without the simulator commit beside it; see docs/EVAL.md for the details and for the full evaluation procedure.

Caveat on the tactile pathway

This checkpoint carries the tactile pathway, but this benchmark cannot demonstrate that touch contributes to the score. Object randomisation is +/-2-5 mm with no domain randomisation, so a policy that ignores its cameras and its tactile sensors entirely can still score well. Use scripts/probe_z_tactile_dependence.py to measure the causal contribution yourself.

License

CC BY-SA 4.0, as the parent repository.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · n0vtla

Нельзя запустить

Модели для роботов не запускаются как сервис инференса.

Ревизия весов
dd641b1

0 моделей