Характеристики

Базовая модель: MolmoAct2
Библиотека: lerobot
Опубликована: 15 июл 2026

Ссылки

Hugging Face

molmoact2_eyedrops_basket_lightbox_25k

pravsels

Языковая модельИзображение, текст → action3 профессии

Дообученная на данных SO101 модель MolmoAct2 для управления роботом при помещении глазных капель в корзину у лайтбокса.

12скачиваний за 30 дней0лайковвеса обновлены15 июл 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Это дообученная vision-language-action модель MolmoAct2 от Ai2, адаптированная к выполнению задачи `eyedrops_basket_lightbox` на данных SO101. Чекпойнт обучен на базе `allenai/MolmoAct2`; указаны 25 000 шагов обучения и режим action-expert-only. Весовой файл в формате Safetensors размещён в корне репозитория для прямой загрузки.

Модель предназначена для управления роботом SO101 по визуальным наблюдениям и инструкциям в сценарии помещения глазных капель в корзину у лайтбокса. Она может служить специализированной политикой для воспроизведения этой манипуляционной задачи и отправной точкой для дальнейшей адаптации. Лицензия и дополнительные сведения о производительности в предоставленных материалах не указаны.

Сценарии применения

управление SO101 в задаче помещения глазных капель в корзину
воспроизведение манипуляции с корзиной у лайтбокса
дообучение политики MolmoAct2 для конкретного сценария робота

Ограничения

Модель адаптирована к узкой задаче `eyedrops_basket_lightbox` на данных SO101, поэтому её пригодность для других роботов и сценариев не установлена. В предоставленных материалах нет сведений о лицензии и оценках качества.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

II.10Разработка и данныеРазработка и эксплуатация AI/ML-системAI помогает создавать, оценивать, развёртывать и контролировать AI/ML-системы на всём жизненном цикле.30 задач49 000моделей IV.10Отраслевые задачиДом, личная жизнь, уход и повседневные задачиAI помогает помогать человеку планировать повседневные дела и безопасно управлять домашней средой.30 задач962модели II.2Разработка и данныеСоздание и понимание программного кодаAI помогает писать, объяснять и связывать программный код с требованиями и существующей системой.20 задач21 443модели

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

molmoact2_eyedrops_basket_lightbox_25k

Fine-tuned MolmoAct2 (action-expert-only) for eyedrops_basket_lightbox on SO101 data.


Policy	MolmoAct2 (`policy.type=molmoact2`)
Init checkpoint	allenai/MolmoAct2
Dataset	pravsels/eye_drops_to_basket_lightbox
Task	`eyedrops_basket_lightbox`
Action dim	6 (single-arm)
Cameras	`top`, `wrist`, `front`
Training	25k steps, QUANTILES norm, freeze, batch 32 global, lightbox dataset, Isambard GH200 (8h TIMEOUT before 30k save)
Prior HF repo	pravsels/molmoact2_eyedrops_basket_lightbox
W&B project	molmoact2_eyedrops_basket_lightbox_25k
W&B run	0wj3v47g

Checkpoints

The checkpoint (local step 025000, 25k training steps) lives at the repository root for direct loading.

Verification

| Checkpoint step | 025000 | | Source path | checkpoints/025000/pretrained_model/ | | model.safetensors | 10,884,573,720 bytes, sha256 326f0dde06403075e4fcc0434cb066c38235fd5b9264c782d88a01d8f51bf2c6 | | policy_preprocessor.json | 2,495 bytes, sha256 817d1b7650bc4b2963f9949626037113525d7aa31e48358e8981a5b8774a0599 | | policy_postprocessor.json | 757 bytes, sha256 6dbed1e1ec69e8c50f3a04c1f144a54231e3ef508f15fd7896ead43ea645b033 | | train_config.json | 8,277 bytes, sha256 f6a9cebf81903537e1194923539f51f85d7ca362f8cb21713efb0cae9d30fea5 |

Verify after download:

sha256sum model.safetensors
# expected: 326f0dde06403075e4fcc0434cb066c38235fd5b9264c782d88a01d8f51bf2c6

Usage

from lerobot.policies.molmoact2.modeling_molmoact2 import MolmoAct2Policy
policy = MolmoAct2Policy.from_pretrained("pravsels/molmoact2_eyedrops_basket_lightbox_25k")

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · lerobot

Нельзя запустить

Модели для роботов не запускаются как сервис инференса.

Ревизия весов: 9c3860d