/ Модель

Характеристики

Лицензия
Apache 2.0
Библиотека
pytorch
Опубликована
3 июл 2026

SidewalkPilot-v3.1

Языковая модельИзображение, текст → action

Сверточная модель предсказывает руление RC-машины по кадру камеры для экспериментов с навигацией по тротуарам.

0скачиваний за 30 дней0лайковвеса обновлены13 июл 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

SidewalkPilot-v3.1 — сверточная модель управления RC-машиной, разработанная Ram Shreyas Naik Sabavat. Она принимает кадр с камеры размером 320×180 в формате OpenCV BGR и предсказывает направление руления для движения по тротуару: девять классов угла с дополнительными смещениями внутри классов. Модель содержит около 5,53 млн параметров и распространяется в формате FP32 ONNX; выход также включает оценку газа, но её автор не использует в текущей системе из-за недостаточной вариативности обучающих меток газа.

Модель предназначена для экспериментов с автономным управлением небольшой RC-машиной, навигацией по тротуарам и развёртыванием ONNX/TensorRT на Jetson. В проверке на 81 237 полевых изображениях достигла точности 28,1% по сбалансированным девяти классам; набор использовался для проверки соответствия обучающим данным, поэтому эти показатели не подтверждают обобщение на новые сцены. Лицензия — Apache-2.0.

Модель не распознаёт препятствия, не проверяет безопасность пути, не оценивает уверенность и не выявляет сцены вне распределения. Изменения освещения, тени, геометрия бордюров, съезды, движение камеры и редкие повороты могут привести к небезопасному управлению. В README рекомендуется независимое экстренное торможение по LiDAR, ручное управление, ограничение скорости и строго ограниченные условия эксплуатации.

Сценарии применения

  • управление рулением небольшой RC-машины по изображению с камеры
  • эксперименты по автономному движению RC-машины по тротуару
  • развёртывание модели управления рулением в ONNX на Jetson
  • оценка направления поворота по кадру 320×180

Ограничения

Модель не распознаёт препятствия и не оценивает уверенность; изменения освещения, сцены вне обучающего распределения и редкие повороты могут вызвать небезопасное управление. Приведённые метрики измерены на полевых изображениях для проверки соответствия обучающим данным и не подтверждают обобщение на новых сценах.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

SidewalkPilot-v3.1

SidewalkPilot-v3.1 maps one 320x180 OpenCV BGR frame to steering control for the SidewalkPilot RC car. First 9-class plus within-bucket-offset steering head; final epoch.

Model Details

  • Developer: Ram Shreyas Naik Sabavat
  • Series: 3.x
  • Architecture: SidewalkPilotV3 CNN, approximately 5.53 million parameters
  • Model type: 9-class steering classification plus within-bucket offsets and throttle
  • Checkpoint role: final-epoch
  • Artifact: SidewalkPilot-v3.1.onnx (FP32 ONNX)
  • Checkpoint created: 2026-07-03 18:48 PDT
  • Input: [batch, 3, 180, 320], OpenCV BGR
  • Preprocessing: resize to 320x180, then (x / 255 - 0.5) / 0.5
  • Output: [batch, 19]: 9 class logits, 9 offsets, and throttle

Output Decoding

class_id = argmax(output[0:9])
fraction = sigmoid(output[9 + class_id])
steering_deg = bucket_low[class_id] + fraction * bucket_width[class_id]
throttle = sigmoid(output[18])  # not used by the current runtime

Logical steering uses 0 for full left, 90 for straight, and 180 for full right. The throttle output is not deployed because the collected throttle labels do not contain enough variation to train useful throttle control.

Evaluation Setup

  • Evaluation set: 81,237 current Series 3 real field images
  • Purpose: training-set fit check, not held-out generalization proof
  • Error unit: logical steering degrees
  • Selection priority: balanced 9-bucket accuracy and turn recall first; MAE is supporting evidence
  • Cross-series warning: do not compare these numbers directly with Series 1/2, which use their original 2,224-image dataset

Chronological Metrics Through This Version

ModelBal9Turn exactTurn +/-1Straight exactMAEMedian AESigned error
3.016.0%15.3%42.9%23.4%18.97113.623-3.594
3.0b15.9%14.8%42.3%24.6%18.45013.129-3.944
3.1 (this model)28.1%26.8%53.3%55.2%22.6479.729-2.353

Class-Balanced Ranking Through This Version

RankModelBal9Turn exactTurn +/-1MAEMedian AESigned error
13.128.1%26.8%53.3%22.6479.729-2.353
23.016.0%15.3%42.9%18.97113.623-3.594
33.0b15.9%14.8%42.3%18.45013.129-3.944

Current Version Snapshot

  • Balanced 9-bucket exact: 28.1%
  • Turn exact: 26.8%
  • Turn within one bucket: 53.3%
  • Straight exact: 55.2%
  • MAE: 22.647 degrees
  • Median absolute error: 9.729 degrees
  • Signed error: -2.353 degrees

Intended Use

  • Small RC-car autonomy experiments
  • Sidewalk/path steering research
  • Jetson ONNX/TensorRT deployment experiments

Limitations and Safety

This model does not identify obstacles, prove a clear path, estimate confidence, or detect out-of-distribution scenes. Shadows, lighting changes, curb geometry, driveways, camera movement, and underrepresented turns can cause unsafe steering. Keep independent LiDAR emergency braking, manual takeover, conservative speed limits, and bounded operating conditions above model output. v3.3 through v3.4b have not yet received a physical-car field verdict.

Reproducibility

artifact_manifest.json records the artifact SHA-256, tensor signature, checkpoint role, evaluation set, and current report metrics.

Links

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · pytorch

Нельзя запустить

Модели для роботов не запускаются как сервис инференса.

Ревизия весов
68e332c

0 моделей