/ Модель

Характеристики

Лицензия
MIT
Библиотека
pytorch
Опубликована
13 июл 2026

skyjepa

Языковая модельИзображение, текст → action

Модель мира SkyJEPA для управления траекторией квадрокоптера по данным состояния и управляющим воздействиям в симуляции.

0скачиваний за 30 дней0лайковвеса обновлены7 окт 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Ethgar/skyjepa — модель PyTorch от Ethgar, представляющая собой чистую повторную реализацию SkyJEPA, модели латентной динамики и мира для квадрокоптеров. Она обучена на данных доменно-рандомизированной симуляции и предназначена для планирования и управления полётом с помощью контроллера MPPI. Модель принимает последовательности 18-мерных состояний (положение, скорость, матрица ориентации и угловые скорости) и 4-мерных управляющих воздействий с частотой 20 Гц; изображения не используются.

Архитектура включает причинные TCN-кодировщики состояния и действий, GRU-предиктор латентной динамики и физический пробер, выдающий остаточные ускорения для дифференцируемого интегратора твёрдого тела на SO(3). Стек кодировщика и предиктора содержит около 5,6 тыс. параметров. В симуляции модель демонстрирует полёт по кругу, траектории в форме восьмёрки и лемнискаты. Репозиторий кода пока закрыт, поэтому применение ограничено доступными весами и описанным сценарием. Лицензия — MIT.

Сценарии применения

  • Планирование траектории квадрокоптера в симуляции
  • Управление полётом квадрокоптера методом MPPI
  • Моделирование латентной динамики дрона по данным GPS и IMU
  • Проверка полёта по круговой траектории
  • Проверка полёта по траектории в форме восьмёрки или лемнискаты

Ограничения

Обучение и демонстрация описаны для доменно-рандомизированной симуляции; перенос на реальный квадрокоптер не подтверждён. Кодовый репозиторий закрыт, а вход модели основан на состоянии и действиях, а не на изображениях.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Part of Ethgar's robot lab notebook: the 5k reference model of a clean-room SkyJEPA reimplementation (5.6k parameters; flies circle, figure-8 and lemniscate by MPPI through the learned model in sim). The code repository is private for now.

SkyJEPA — quadrotor latent-dynamics world model

A clean-room PyTorch reimplementation of SkyJEPA (Rao et al., 2026, arXiv:2606.23444): a JEPA-style latent-dynamics world model for quadrotors, trained entirely on domain-randomized simulation, with a physics-inspired prober and an MPPI controller. Trained with the full profile.

  • Training data: Ethgar/skyjepa-quadrotor-sim
  • Method: two causal-TCN encoders (state + action) → GRU latent predictor, anti-collapse via SIGReg (LeJEPA), a frozen-backbone physics prober that outputs residual accelerations correcting a differentiable SO(3) rigid-body integrator. Encoder+predictor stack is ~5.6k parameters.
  • Inputs: 18-dim state (position, velocity, rotation matrix, body rates) and 4-dim action histories at 20 Hz. State-based (GPS/IMU), not vision.

Files

filecontents
jepa.ptstage-1 encoders + GRU predictor + normalizer
prober.ptstage-2 physics prober (frozen backbone)
baseline.ptpredictive-MLP baseline (optional)
export/skyjepa_stack.tsTorchScript deploy stack (optional)
export/skyjepa_stack.onnxONNX deploy stack (optional)

Usage

pip install "skyjepa[hf] @ git+https://github.com/edgarmoreaualix/LeDrone.git#subdirectory=skyjepa"
huggingface-cli download Ethgar/skyjepa --local-dir checkpoints/full
python scripts/run_mppi_demo.py --profile full --ckpt-dir checkpoints/full

License & credit

MIT. Method credit belongs to the original SkyJEPA authors (Rao et al., 2026, arXiv:2606.23444); this is an independent clean-room reimplementation, not affiliated with or endorsed by them.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · pytorch

Нельзя запустить

Модели для роботов не запускаются как сервис инференса.

Ревизия весов
8102770

0 моделей