/ Модель

Характеристики

Опубликована
14 июл 2026

grpo_stable_reasoning_nolow_02kl_0714

Обучение с подкреплением

Контрольные точки GRPO-модели на базе InternVL2-1B для исследования визуально-языкового управления автомобилем в симуляторе CARLA.

0скачиваний за 30 дней0лайковвеса обновлены14 июл 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

PhoenixHu разработал контрольные точки обучения с подкреплением GRPO для визуально-языковой модели управления автомобилем в стиле SimLingo. В основе — InternVL2-1B с непрерывной головкой, выдающей скорость и путевые точки. Вариант nolow обучен с коэффициентом KL 0,2; карточка также перечисляет контрольные точки шагов 100, 200 и 300 в формате PyTorch с весами fp32. Для восстановления архитектуры при оценке необходим конфигурационный файл обучения .hydra/config.yaml.

Модель предназначена для экспериментов и оценки управления автомобилем в симуляторе CARLA по визуальным и языковым входам. Она объединяет зрительно-языковую основу и непрерывные выходы управления. В карточке не приведены результаты оценки, поэтому качество и устойчивость поведения подтвердить нельзя. Условия лицензии в доступных данных не описаны.

Сценарии применения

  • оценка управления автомобилем в симуляторе CARLA
  • эксперименты с обучением вождению методом GRPO
  • выдача скорости и путевых точек по визуальному контексту
  • сравнение обучения с коэффициентом KL 0,2

Ограничения

Для восстановления архитектуры при оценке требуется .hydra/config.yaml; телеметрия rollouts не включена. В карточке нет результатов оценки поведения.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

grpo_stable_reasoning_nolow_02kl_0714

GRPO RL checkpoints for a SimLingo-style driving VLA (InternVL2-1B + continuous speed-waypoint head). Variant: nolow + KL 0.2 (0714 run). Companion run: grpo_stable_reasoning_nolow_nokl_0714 (KL off).

  • Each checkpoints/stepNNN.ckpt/pytorch_model.pt = consolidated fp32 state_dict.
  • .hydra/config.yaml = the training config — required to rebuild the model architecture for eval.
filestep
checkpoints/step100.ckpt/pytorch_model.pt100
checkpoints/step200.ckpt/pytorch_model.pt200
checkpoints/step300.ckpt/pytorch_model.pt300
checkpoints/step400.ckpt/pytorch_model.pt400
checkpoints/step500.ckpt/pytorch_model.pt500
import torch
sd = torch.load("checkpoints/step500.ckpt/pytorch_model.pt", map_location="cpu")

Note: rollouts*.jsonl (RL training telemetry) is not included.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

RL-агенты не запускаются как сервис инференса.

Ревизия весов
7704d99

0 моделей