/ Модель

Характеристики

Лицензия
Своя лицензия
Библиотека
n0vtla
Опубликована
31 июл 2026

n0_VTLA_insert_hole

Языковая модельИзображение, текст → action

Дообученная политика 𝒩₀-VTLA управляет одной рукой в UniVTAC для вставки объекта в отверстие по двум визуальным видам и тактильным данным.

47скачиваний за 30 дней1лайквеса обновлены31 июл 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

𝒩₀-VTLA UniVTAC single-arm — модель-политика NeoteAI для управления одной роботизированной рукой в симуляторе UniVTAC. Это дообученная после предобучения версия базовой модели 𝒩₀-VTLA для сценария `insert_hole`.

Модель принимает визуальные и тактильные данные с двумя видами и выдаёт последовательности действий горизонтом 50 шагов в пространстве суставов: дельты для семи суставов и абсолютное значение для захвата. Она предназначена для выполнения задачи вставки объекта в отверстие; действия в пространстве конечного эффектора и соответствующую им нормализацию использовать нельзя.

Контрольная точка распространяется в формате safetensors и занимает около 8,25 ГБ. Для запуска требуется адаптер оценки UniVTAC с обменом через ZMQ и msgpack, а также соответствующие конфигурация и статистика нормализации. Лицензия указана как other; конкретные условия в доступных данных не раскрыты.

Сценарии применения

  • вставка объекта в отверстие в симуляторе UniVTAC
  • управление семью суставами робота и захватом
  • оценка vision-language-action политики с тактильными данными

Ограничения

Политика рассчитана на однорукую конфигурацию UniVTAC и выдаёт действия в пространстве суставов, поэтому ей нужны соответствующие входные данные и статистика нормализации. Для запуска требуется адаптер оценки; доступные сведения не уточняют конкретные условия лицензии.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

𝒩₀-VTLA — UniVTAC single-arm

A 𝒩₀-VTLA single-arm policy for the UniVTAC simulator, post-trained from the 𝒩₀-VTLA pretrained base. This card documents the insert_hole setup.

Embodimentsingle-arm
Action spacejoint, 8-dim (7 joints + gripper)
Action horizon50
Tactile views2
Latent tactile tokens5

Files

model.safetensors                          the full checkpoint (~8.25 GB)
assets/n0_insert_hole_norm/norm_stats.json
config.json                                architecture summary

Serve

The evaluation adapter speaks ZMQ + msgpack, so use scripts/serve_zmq.py from the code repository:

hf download NeoteAI/n0_VTLA_insert_hole --local-dir checkpoints/n0_VTLA_insert_hole

VTLA_ASSET_ID=n0_insert_hole_norm python scripts/serve_zmq.py \
  --config sim_single_arm_tactile \
  --ckpt checkpoints/n0_VTLA_insert_hole \
  --addr "tcp://*:5557" \
  --default-prompt "insert hole"

Serving reads only model.safetensors and assets/<asset-id>/norm_stats.json; no dataset is needed. A correct load prints tactile=True with 2 views and no missing or unexpected state-dict keys. If it reports either, the config does not match the checkpoint.

Then run the evaluation from a UniVTAC checkout with a deploy YAML pointing at port 5557. Set exec_horizon to 50, the model's action horizon: executing fewer steps clips the tail of each chunk, which is where the grasp-closing motion lives.

Action space

Unlike the pretrained base, which predicts end-effector deltas in a canonical 32-dim rot6d container, this policy predicts joint actions: 7 joints plus gripper. The joint dims are element-wise deltas against the current state; the gripper column is absolute. Do not feed it end-effector data or reuse an end-effector normalization asset.

License

These weights are derived from Google's PaliGemma/Gemma parameters and are made available under the Gemma Terms of Use and the Gemma Prohibited Use Policy, not under the CC BY-SA 4.0 licence that covers the source code. This is inherited from the base model.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · n0vtla

Нельзя запустить

Модели для роботов не запускаются как сервис инференса.

Ревизия весов
73a514c

0 моделей