/ Модель

Характеристики

Контекст
4 096 токенов
Параметры
6,6 млрд
Размер весов
14,1 ГБ
Лицензия
Apache 2.0
Архитектура
llava_llama · dense
Опубликована
8 дек 2024

Senna

Генерация текстаТекст → текст3 профессии

Senna — визуально-языковая система для понимания дорожных сцен и планирования движения в автономном вождении.

58скачиваний за 30 дней5лайковвеса обновлены9 дек 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Senna — система для автономного вождения, разработанная HUST и Horizon Robotics. Она объединяет большую визуально-языковую модель с сквозной моделью управления, чтобы выполнять планирование движения и понимать дорожные сцены.

Модель предназначена для планирования движения автомобиля с учётом дорожной обстановки, а также для повышения безопасности, устойчивости и обобщающей способности системы. Архитектура в метаданных указана как плотная LLaVA-LLaMA; размер составляет 6,6 млрд параметров, родная длина контекста — 4096 токенов. Репозиторий содержит веса PyTorch; карточка описывает визуально-языковую систему, но не уточняет поддерживаемые языки.

В метаданных указана лицензия Apache-2.0, тогда как README заявляет некоммерческую лицензию; условия использования следует считать противоречивыми и уточнить по первоисточнику перед применением. Система рассчитана на задачи автономного вождения, поэтому её пригодность для безопасного управления автомобилем требует отдельной проверки.

Сценарии применения

  • планирование движения автомобиля по дорожной сцене
  • понимание обстановки вокруг автомобиля по визуальным данным
  • повышение устойчивости планирования при изменении дорожных условий

Ограничения

README не описывает конкретные входные и выходные форматы или результаты оценки. Лицензия в README и метаданных расходится: заявлены некоммерческие условия и Apache-2.0 соответственно.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Senna: Bridging Large Vision-Language Models and End-to-End Autonomous Driving

Model Sources

Model Details

Senna is an autonomous driving system that integrates a Large Vision-Language Model with an end-to-end model to improve planning safety, robustness and generalization.

  • Developed by: HUST, Horizon Robotics
  • Model type: An autonomous driving system that integrates a Large Vision-Language Model with an end-to-end model.
  • License: Non-commercial license

Uses

The primary use of Senna is for end-to-end autonomous driving planning and scene understanding.

Citation Information

@article{jiang2024senna,
      title={Senna: Bridging Large Vision-Language Models and End-to-End Autonomous Driving}, 
      author={Bo Jiang and Shaoyu Chen and Bencheng Liao and Xingyu Zhang and Wei Yin and Qian Zhang and Chang Huang and Wenyu Liu and Xinggang Wang},
      year={2024},
      eprint={2410.22313},
      archivePrefix={arXiv},
      primaryClass={cs.CV},
      url={https://arxiv.org/abs/2410.22313}, 
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

Архитектура llava_llama неизвестна transformers в образе рантайма.

Класс архитектуры
v8SennaLlavaLlamaForCausalLM
Ревизия весов
48aa421

0 моделей