/ Модель

Характеристики

Лицензия
MIT
Библиотека
pytorch
Опубликована
14 июл 2026

skyjepa-20k

Языковая модельИзображение, текст → action

Модель мира на основе JEPA прогнозирует динамику квадрокоптера по истории его состояния и управляющих действий для задач моделирования и управления.

0скачиваний за 30 дней0лайковвеса обновлены7 окт 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

SkyJEPA — модель мира для прогнозирования латентной динамики квадрокоптера, опубликованная Ethgar. Это чистая реализация на PyTorch подхода JEPA с двумя причинными TCN-энкодерами для состояния и действий и GRU-предиктором; стек энкодеров и предиктора содержит около 5,6 тыс. параметров. Модель обучена на 20 тысячах траекторий квадрокоптера из доменно-рандомизированной симуляции и использует физический пробер, выдающий остаточные ускорения для коррекции дифференцируемого интегратора жёсткого тела SO(3).

На вход подаются истории состояния размерности 18 (позиция, скорость, матрица вращения и угловые скорости) и действий размерности 4 с частотой 20 Гц. Модель предназначена для моделирования динамики и управления квадрокоптером; README упоминает контроллер MPPI. Вход основан на состоянии, получаемом, например, от GPS и IMU, а не на изображениях. Лицензия MIT. Код репозитория пока закрыт, что ограничивает возможность изучить реализацию и воспроизвести обучение.

Сценарии применения

  • прогнозирование динамики квадрокоптера по состоянию и действиям
  • моделирование движения дрона в симуляции
  • управление квадрокоптером с помощью MPPI
  • коррекция физической модели полёта квадрокоптера по остаточным ускорениям

Ограничения

Модель принимает состояние и управляющие действия, а не изображения. Код репозитория пока закрыт.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Part of Ethgar's robot lab notebook: the same SkyJEPA model trained on 20k domain-randomised trajectories. The code repository is private for now.

SkyJEPA — quadrotor latent-dynamics world model

A clean-room PyTorch reimplementation of SkyJEPA (Rao et al., 2026, arXiv:2606.23444): a JEPA-style latent-dynamics world model for quadrotors, trained entirely on domain-randomized simulation, with a physics-inspired prober and an MPPI controller. Trained with the full profile.

  • Training data: Ethgar/skyjepa-quadrotor-sim-20k
  • Method: two causal-TCN encoders (state + action) → GRU latent predictor, anti-collapse via SIGReg (LeJEPA), a frozen-backbone physics prober that outputs residual accelerations correcting a differentiable SO(3) rigid-body integrator. Encoder+predictor stack is ~5.6k parameters.
  • Inputs: 18-dim state (position, velocity, rotation matrix, body rates) and 4-dim action histories at 20 Hz. State-based (GPS/IMU), not vision.

Files

filecontents
jepa.ptstage-1 encoders + GRU predictor + normalizer
prober.ptstage-2 physics prober (frozen backbone)
baseline.ptpredictive-MLP baseline (optional)
export/skyjepa_stack.tsTorchScript deploy stack (optional)
export/skyjepa_stack.onnxONNX deploy stack (optional)

Usage

pip install "skyjepa[hf] @ git+https://github.com/edgarmoreaualix/LeDrone.git#subdirectory=skyjepa"
huggingface-cli download Ethgar/skyjepa-20k --local-dir checkpoints/full
python scripts/run_mppi_demo.py --profile full --ckpt-dir checkpoints/full

License & credit

MIT. Method credit belongs to the original SkyJEPA authors (Rao et al., 2026, arXiv:2606.23444); this is an independent clean-room reimplementation, not affiliated with or endorsed by them.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · pytorch

Нельзя запустить

Модели для роботов не запускаются как сервис инференса.

Ревизия весов
a4e2bb8

0 моделей