/ Модель

Характеристики

Лицензия
Apache 2.0
Библиотека
pytorch
Опубликована
3 июл 2026

SidewalkPilot-v3.1b

Языковая модельИзображение, текст → action

Сверточная модель SidewalkPilotV3 преобразует кадр камеры в команды руления для экспериментов с автономным RC-автомобилем на тротуарах и дорожках.

0скачиваний за 30 дней0лайковвеса обновлены13 июл 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

SidewalkPilot-v3.1b — модель Рама Шреяса Найка Сабавата для управления рулением небольшого автомобиля RC по изображению с камеры. Она принимает кадр OpenCV BGR размером 320×180 и выдаёт классификацию одного из девяти диапазонов руления, поправки внутри диапазона и оценку газа. Модель построена на сверточной архитектуре SidewalkPilotV3, содержит около 5,53 млн параметров и распространяется в формате FP32 ONNX; лицензия — Apache-2.0.

Модель предназначена для экспериментов с автономным движением RC-автомобиля по тротуарам и дорожкам, в том числе с развёртыванием ONNX/TensorRT на Jetson. В опубликованной проверке на 81 237 полевых изображениях точность по сбалансированным девяти классам составила 27,4%, а средняя абсолютная ошибка — 20,958°; автор уточняет, что это проверка соответствия обучающему набору, а не доказательство обобщения на новые данные. Выход газа не используется в текущей системе из-за недостаточного разнообразия обучающих меток.

Модель не распознаёт препятствия, не подтверждает безопасность пути и не оценивает уверенность или выход за пределы обучающих данных. Тени, изменение освещения, геометрия бордюров, проезды, движение камеры и недостаточно представленные повороты могут привести к опасному рулению; README рекомендует независимое аварийное торможение LiDAR, ручное управление, ограничение скорости и условия эксплуатации с заданными границами.

Сценарии применения

  • управление рулением RC-автомобиля по кадру камеры
  • эксперименты с автономной навигацией по тротуару
  • оценка направления поворота по изображению дороги
  • развёртывание управления автомобилем через ONNX на Jetson
  • исследование визуального управления небольшим автомобилем

Ограничения

Модель не обнаруживает препятствия, не оценивает уверенность и может выдавать опасное руление при изменении освещения, тенях, движении камеры или недостаточно представленных поворотах. Опубликованные метрики отражают проверку на обучающем наборе, а выход газа не используется в текущей системе.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

SidewalkPilot-v3.1b

SidewalkPilot-v3.1b maps one 320x180 OpenCV BGR frame to steering control for the SidewalkPilot RC car. Best-validation checkpoint from the v3.1 hybrid-head run.

Model Details

  • Developer: Ram Shreyas Naik Sabavat
  • Series: 3.x
  • Architecture: SidewalkPilotV3 CNN, approximately 5.53 million parameters
  • Model type: 9-class steering classification plus within-bucket offsets and throttle
  • Checkpoint role: best-validation
  • Artifact: SidewalkPilot-v3.1b.onnx (FP32 ONNX)
  • Checkpoint created: 2026-07-03 18:48 PDT
  • Input: [batch, 3, 180, 320], OpenCV BGR
  • Preprocessing: resize to 320x180, then (x / 255 - 0.5) / 0.5
  • Output: [batch, 19]: 9 class logits, 9 offsets, and throttle

Output Decoding

class_id = argmax(output[0:9])
fraction = sigmoid(output[9 + class_id])
steering_deg = bucket_low[class_id] + fraction * bucket_width[class_id]
throttle = sigmoid(output[18])  # not used by the current runtime

Logical steering uses 0 for full left, 90 for straight, and 180 for full right. The throttle output is not deployed because the collected throttle labels do not contain enough variation to train useful throttle control.

Evaluation Setup

  • Evaluation set: 81,237 current Series 3 real field images
  • Purpose: training-set fit check, not held-out generalization proof
  • Error unit: logical steering degrees
  • Selection priority: balanced 9-bucket accuracy and turn recall first; MAE is supporting evidence
  • Cross-series warning: do not compare these numbers directly with Series 1/2, which use their original 2,224-image dataset

Chronological Metrics Through This Version

ModelBal9Turn exactTurn +/-1Straight exactMAEMedian AESigned error
3.016.0%15.3%42.9%23.4%18.97113.623-3.594
3.0b15.9%14.8%42.3%24.6%18.45013.129-3.944
3.128.1%26.8%53.3%55.2%22.6479.729-2.353
3.1b (this model)27.4%25.8%52.3%56.7%20.9589.591-3.769

Class-Balanced Ranking Through This Version

RankModelBal9Turn exactTurn +/-1MAEMedian AESigned error
13.128.1%26.8%53.3%22.6479.729-2.353
23.1b27.4%25.8%52.3%20.9589.591-3.769
33.016.0%15.3%42.9%18.97113.623-3.594
43.0b15.9%14.8%42.3%18.45013.129-3.944

Current Version Snapshot

  • Balanced 9-bucket exact: 27.4%
  • Turn exact: 25.8%
  • Turn within one bucket: 52.3%
  • Straight exact: 56.7%
  • MAE: 20.958 degrees
  • Median absolute error: 9.591 degrees
  • Signed error: -3.769 degrees

Intended Use

  • Small RC-car autonomy experiments
  • Sidewalk/path steering research
  • Jetson ONNX/TensorRT deployment experiments

Limitations and Safety

This model does not identify obstacles, prove a clear path, estimate confidence, or detect out-of-distribution scenes. Shadows, lighting changes, curb geometry, driveways, camera movement, and underrepresented turns can cause unsafe steering. Keep independent LiDAR emergency braking, manual takeover, conservative speed limits, and bounded operating conditions above model output. v3.3 through v3.4b have not yet received a physical-car field verdict.

Reproducibility

artifact_manifest.json records the artifact SHA-256, tensor signature, checkpoint role, evaluation set, and current report metrics.

Links

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · pytorch

Нельзя запустить

Модели для роботов не запускаются как сервис инференса.

Ревизия весов
2927331

0 моделей