/ Модель

Характеристики

Лицензия
Apache 2.0
Опубликована
6 июл 2026

MolmoAct2-DROID-absjoint

Языковая модельИзображение, текст → action3 профессии

Промежуточный полнофайнтюн MolmoAct2-DROID для предсказания абсолютных суставных поз робота по данным DROID.

8скачиваний за 30 дней0лайковвеса обновлены6 июл 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

MolmoAct2-DROID-absjoint — полнофайнтюн модели allenai/MolmoAct2-DROID, выполненный shrg7 на отфильтрованной смеси данных DROID shrg7/droid-equad-stage-1-jointabs в формате LeRobot v3.0. Модель предназначена для роботизированного управления с непрерывными действиями: она предсказывает абсолютные положения суставов для семи суставов руки и захвата, формируя последовательности действий длиной 15 шагов. Используется политика MolmoAct2Policy с непрерывным flow action expert; нормировочная статистика рассчитана по обучающему набору данных.

Это промежуточный чекпойнт на шаге 16000, обучение которого ещё продолжается, поэтому его качество и пригодность для эксплуатации не подтверждены. Репозиторий содержит веса Safetensors и конфигурационные файлы стандартного формата LeRobot. Лицензия — Apache-2.0.

Сценарии применения

  • предсказание абсолютных положений семи суставов роботизированной руки
  • управление захватом робота последовательностями непрерывных действий
  • эксперименты с роботизированным управлением на данных DROID

Ограничения

Это промежуточный чекпойнт на шаге 16000, обучение ещё продолжается; README отмечает особенности нормировки данных DROID и проблему клиппинга franka_droid.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

MolmoAct2-DROID — absolute joint-pose full fine-tune

Full fine-tune of allenai/MolmoAct2-DROID on the filtered DROID mixture (shrg7/droid-equad-stage-1-jointabs, LeRobot v3.0) with absolute joint-pose action targets (arm[t] = q[t+1], 7 arm joints + gripper).

  • Trainer: lerobot-native MolmoAct2Policy (continuous flow action expert)
  • control_mode="absolute joint pose", action_mode=continuous, chunk 15
  • Norm stats derived from this dataset (avoids the franka_droid clip issue)
  • Checkpoint: step 16000 (training in progress; this is an intermediate checkpoint)

Standard lerobot MolmoAct2 checkpoint dir: model.safetensors + config.json + pre/post-processor pipelines (policy_preprocessor*, policy_postprocessor*) + train_config.json.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

Модели для роботов не запускаются как сервис инференса.

Ревизия весов
9fa28aa

0 моделей