/ Модель

Характеристики

Опубликована
27 июн 2026

ppo-LunarLander-v2

Обучение с подкреплением

Обученный агент PPO для управления посадочным модулем в симуляции LunarLander-v2.

1скачиваний за 30 дней0лайковвеса обновлены27 июн 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель afsee/ppo-LunarLander-v2 — обученный агент обучения с подкреплением, разработанный автором репозитория afsee для игры LunarLander-v2. Агент использует алгоритм PPO (Proximal Policy Optimization) и предназначен для управления посадочным модулем в среде LunarLander-v2: по наблюдениям среды выбирает действия, чтобы выполнить посадку.

Репозиторий содержит веса в формате PyTorch. Данных о размере модели, поддержке естественных языков и лицензии нет; применение ограничено сценарием управления агентом в LunarLander-v2.

Сценарии применения

  • управление посадочным модулем в LunarLander-v2
  • обучение и демонстрация алгоритма PPO
  • эксперименты с обучением агентов в средах Gymnasium

Ограничения

Модель предназначена для среды LunarLander-v2; перенос на другие среды README не описывает. Сведения о лицензии и метриках качества отсутствуют.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

PPO Agent Playing LunarLander-v2

This is a trained model of a PPO agent playing LunarLander-v2.

Hyperparameters

{'exp_name': 'ppo'
'seed': 1
'torch_deterministic': True
'cuda': True
'track': False
'wandb_project_name': 'cleanRL'
'wandb_entity': None
'capture_video': False
'env_id': 'LunarLander-v2'
'total_timesteps': 5000000
'learning_rate': 0.00025
'num_envs': 4
'num_steps': 128
'anneal_lr': True
'gae': True
'gamma': 0.99
'gae_lambda': 0.95
'num_minibatches': 4
'update_epochs': 4
'norm_adv': True
'clip_coef': 0.2
'clip_vloss': True
'ent_coef': 0.01
'vf_coef': 0.5
'max_grad_norm': 0.5
'target_kl': None
'repo_id': 'afsee/ppo-LunarLander-v2-unit8'
'batch_size': 512
'minibatch_size': 128}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

RL-агенты не запускаются как сервис инференса.

Ревизия весов
21b4aba

0 моделей