/ Модель

Характеристики

Лицензия
Gemma
Библиотека
lerobot
Опубликована
19 июл 2026

pi05_fm_libero

Языковая модельИзображение, текст → action3 профессии

Дообученная модель Pi0.5 преобразует визуальные наблюдения и инструкции в последовательности действий робота для задач LIBERO.

30скачиваний за 30 дней0лайковвеса обновлены19 июл 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Pi0.5 (flow matching) — модель vision-language-action для управления роботами, разработанная Physical Intelligence и дообученная на наборе LIBERO. Она принимает визуальные наблюдения и инструкцию на естественном языке, а затем выдаёт последовательность действий для робота. Действия формируются интегрированием ODE flow matching; для каждого фрагмента действий требуется 10 проходов action expert.

Этот чекпойнт служит базовой моделью flow matching в сравнительном исследовании Pi0.5-Drift: README указывает, что использованы те же базовые веса, данные, инициализация, batch, seed и расписание обучения на 100 тыс. шагов, а различается только обучающая цель. На официальной оценке LIBERO модель показала высокую успешность в наборах spatial, object и goal. Для оценки нужны графический узел с рендерером MuJoCo/LIBERO и доступ к закрытому токенизатору google/paligemma-3b-pt-224. Модель распространяется под лицензией Gemma.

Сценарии применения

  • управление роботом по текстовой инструкции и изображению с камеры
  • выполнение задач перемещения и взаимодействия с объектами в LIBERO
  • оценка vision-language-action политики в симуляторе MuJoCo
  • дообучение роботизированной политики на собственном наборе данных LeRobot

Ограничения

Формирование каждого фрагмента действий требует 10 проходов action expert. Для оценки нужны графический узел с MuJoCo/LIBERO и разрешённый доступ к токенизатору google/paligemma-3b-pt-224.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Pi0.5 (flow matching) · LIBERO (100k) — matched baseline for Pi0.5-Drift

Pi0.5 is a vision-language-action model from Physical Intelligence that decodes an action chunk by integrating a flow-matching ODE — 10 forward passes of the action expert per chunk. This model is the matched flow-matching baseline of the Pi0.5-Drift budget study: same base weights, data, initialization, batch, seed, and 100k LR schedule as zuoxingdong/pi05_drift_libero; the training objective is the only difference. Loads with vanilla LeRobot — no plugin needed.

Results

LIBERO, official lerobot-eval on lerobot==0.6.0, 3 eval seeds {1000, 1001, 1002}, 50 episodes/task, n_action_steps=10.

SuiteFM — this model (10 NFE)Drift (1 NFE)
libero_spatial98.5 ± 0.397.9 ± 1.0
libero_object99.1 ± 0.699.0 ± 0.2
libero_goal96.7 ± 0.598.1 ± 0.4
libero_10 (long horizon)93.3 ± 0.794.7 ± 1.9
Overall average96.997.4

Budget sweep — 25k/50k/75k/100k: FM 96.2 / 95.9 / 96.7 / 96.9 vs Drift 96.8 / 97.3 / 97.7 / 97.4.

Evaluation

Needs a graphics-capable node for the MuJoCo/LIBERO renderer, and access to the gated Pi0.5 tokenizer google/paligemma-3b-pt-224 (request access, then hf auth login).

pip install "lerobot[pi,libero]>=0.6.0,<0.7" "mujoco==3.3.2"

lerobot-eval \
  --policy.path=zuoxingdong/pi05_fm_libero \
  --policy.n_action_steps=10 \
  --env.type=libero \
  --env.task=libero_spatial \
  --eval.n_episodes=50 \
  --eval.batch_size=2 \
  --eval.use_async_envs=true \
  --seed=1000 \
  --output_dir=eval/pi05_fm_libero

Finetune on your data

lerobot-train \
  --policy.type=pi05 \
  --policy.pretrained_path=zuoxingdong/pi05_fm_libero \
  --policy.dtype=bfloat16 \
  --policy.gradient_checkpointing=true \
  --dataset.repo_id=lerobot/libero \
  --dataset.revision=a1aaacb7f6cd6ee5fb43120f673cebb0cfea7dd4 \
  --batch_size=56 \
  --steps=10000

The dataset shown is the one this model was trained on — lerobot/libero (LIBERO, LeRobot v3 format), pinned to the training revision. To finetune on your own data, swap in your --dataset.repo_id.

Training details & provenance

  • Base: lerobot/pi05_libero VLM with a freshly re-initialized action expert, full-parameter finetune on lerobot/libero (all four suites), MEAN_STD normalization, bf16, effective batch 56, LR 2.5e-5 cosine-decayed over 100k steps (this checkpoint = step 100k, schedule end), seed 1000, num_inference_steps=10.
  • Stack: lerobot==0.6.0, trained via the lerobot_policy_pi05_drift plugin with use_drifting_loss=false (the plugin provides the fresh-expert initialization; with the drift loss disabled its path is stock Pi0.5 flow matching). This release's config.json is standard "type": "pi05" — weights byte-identical to the training checkpoint — so it loads with vanilla LeRobot.

License

Weights derive from Pi0.5 / PaliGemma and are distributed under the Gemma license, matching the upstream lerobot/pi05_libero release.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · lerobot

Нельзя запустить

Модели для роботов не запускаются как сервис инференса.

Ревизия весов
678a322

0 моделей