/ Модель

Характеристики

Лицензия
Apache 2.0
Библиотека
lerobot
Опубликована
17 июл 2026

pi05-flatten-tshirt

Языковая модельИзображение, текст → action3 профессии

Политика π0.5 для управления двуручным роботом при расправлении смятой футболки по изображениям с камер и состоянию суставов.

8скачиваний за 30 дней0лайковвеса обновлены17 июл 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Это политика vision-language-action π0.5, дообученная авторами репозитория deformable-bench для расправления смятой футболки на столе с помощью двуручного робота Piper. Модель предназначена для управления манипуляциями с тканью в симуляции: она получает изображения с трёх RGB-камер и 14-мерное состояние суставов робота и предсказывает действия для выполнения задачи. Используются архитектура pi05_evo в LeRobot, точность bfloat16 и базовая модель lerobot/pi05_base.

Для дообучения применён набор flatten_tshirt_200 из 200 эпизодов и 41 464 кадров; обучение продолжалось 30 000 шагов. Авторы настраивали аугментации изображений с учётом более тёмных кадров реальных камер для переноса из симуляции, однако качество такого переноса не подтверждено опубликованной оценкой. Чекпойнт прошёл лишь небольшую проверку в замкнутом цикле и не оценивался по стандартному протоколу бенчмарка N=100, поэтому его следует считать артефактом обучения, а не подтверждённым результатом. Лицензия — Apache-2.0.

Сценарии применения

  • расправление смятой футболки на столе двуручным роботом
  • эксперименты с манипуляцией тканью в симуляции
  • обучение политик vision-language-action для задач с деформируемыми объектами

Ограничения

Чекпойнт не прошёл стандартную оценку бенчмарка N=100; опубликованы только результаты небольшой проверки в замкнутом цикле. Перенос из симуляции на реального робота пока не подтверждён.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

π0.5 (pi05_evo) — flatten_tshirt (bimanual cloth flattening)

A π0.5 vision-language-action policy fine-tuned on the flatten_tshirt task of a bimanual deformable-object (cloth / bag) manipulation benchmark. The robot is a dual-arm Piper; the task is to flatten a crumpled t-shirt on a table.

Simulation uses a GPU cloth solver co-simulated with the robot in a single model, and observations are rendered with a photorealistic renderer.

Model

Architecturepi05_evo (LeRobot), fine-tuned from lerobot/pi05_base
Precisionbfloat16
Observation3 × RGB (static_cam, left_hand_cam, right_hand_cam) + 14-D joint state
Action14-D (left 6 joints + gripper, right 6 joints + gripper)
Chunk size / action steps50 / 50
max_state_dim / max_action_dim32 / 32 (14-D state and action are padded)

Training

Datasetflatten_tshirt_200 — 200 episodes / 41,464 frames, LeRobot v3.0, 25 fps
Steps30,000
Batch size8 (single A100-80G, gradient checkpointing)
Learning rate2.5e-5
Seed1000
Image augmentationenabled, max 3 random transforms per sample

Augmentation follows a tuned recipe (brightness / contrast / saturation / hue / sharpness / small affine) rather than the LeRobot default, which is disabled. The brightness range is deliberately asymmetric toward the darker side: simulation lighting is idealized while real RealSense D435i footage tends to be darker, so biasing augmentation toward darker samples is the right direction for sim-to-real transfer.

Reproducing: pin the base model revision

This checkpoint was fine-tuned from lerobot/pi05_base at revision 9e55186ad36e66b95cda57bc47818d9e6237ae30. Pin that revision if you fine-tune from base yourself — a later snapshot of that repo ships a policy_preprocessor.json containing a relative_actions_processor that is not registered in this version of LeRobot and fails to load. This only affects training from base; loading this checkpoint is unaffected.

Status

⚠️ This checkpoint has not yet been formally evaluated. It has only been through a small smoke-level closed-loop run, not the benchmark's standard N=100 protocol. Success-rate numbers are deliberately not published here yet; they will be added once the full evaluation has been run. Treat this as a training artifact, not a reported result.

Usage

from lerobot.policies.pi05_evo.modeling_pi05_evo import PI05EvoPolicy

policy = PI05EvoPolicy.from_pretrained("deformable-bench/pi05-flatten-tshirt")

The policy expects the three camera streams named exactly as listed above, plus a 14-D observation.state, and returns a 14-D action.

Use the model's default inference parameters. Overriding n_action_steps in particular has been observed to degrade closed-loop success substantially on this benchmark.

License

Apache-2.0.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · lerobot

Нельзя запустить

Модели для роботов не запускаются как сервис инференса.

Ревизия весов
0f8f6d3

0 моделей