/ Модель

Характеристики

Контекст
128 000 токенов
Параметры
3,1 млрд
Размер весов
7,5 ГБ
Архитектура
qwen2_5_vl · dense
Библиотека
transformers
Опубликована
29 апр 2025

nora-long

Языковая модельИзображение, текст → action3 профессии

Nora-Long преобразует инструкции на английском языке и изображения рабочей зоны в последовательности действий для роботизированных манипуляций.

237скачиваний за 30 дней8лайковвеса обновлены27 авг 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Nora-Long — открытая vision-language-action модель declare-lab для управления манипуляциями робота. Она принимает инструкцию на английском языке и изображение рабочего пространства с камеры, а затем предсказывает последовательность из пяти нормализованных действий робота. Модель дообучена на эпизодах манипуляций из Open X-Embodiment, исходная модель — Qwen 2.5 VL-3B; архитектура — Qwen2.5-VL с 3,1 млрд параметров и контекстом 128 000 токенов.

Модель предназначена для выполнения инструкций по манипуляциям в симуляции и на роботизированных платформах. Выходное действие содержит изменения положения и ориентации 7-DoF концевого эффектора и состояние захвата. Для исполнения на реальном роботе действия необходимо денормализовать по статистике конкретного робота и набора данных. В описании отмечены более высокие результаты в симуляции LIBERO и более низкие на задачах WidowX по сравнению с Nora. Веса и код обучения выпущены под лицензией MIT.

Сценарии применения

  • выполнение инструкций по перемещению объектов в симуляции LIBERO
  • управление захватом и перемещением предметов роботом по изображению с камеры
  • прогнозирование последовательности из пяти действий манипулятора
  • дообучение модели под конкретного робота и набор данных

Ограничения

По описанию Nora-Long уступает Nora на задачах WidowX, хотя показывает лучшие результаты в симуляции LIBERO. Для управления реальным роботом выходные действия требуется денормализовать с учётом статистики конкретной платформы и набора данных.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Nora-Long

Nora-Long is an open vision-language-action model trained on robot manipulation episodes from the Open X-Embodiment dataset. The model takes language instructions and camera images as input and generates robot actions. Nora-Lonf is trained directly from Qwen 2.5 VL-3B. All Nora checkpoints, as well as our training codebase are released under an MIT License.

Unlike Nora, Nora-Long is pretrained with an action horizon of 5. We observe worse performance on WidowX robot task with Nora-Long, but superior performance in libero simulation. Please feel free to finetune this model!

Model Description

  • Model type: Vision-language-action (language, image => robot actions)
  • Language(s) (NLP): english
  • License: MIT
  • Finetuned from model : Qwen 2.5 VL-3B

Model Sources

Usage

Nora take a language instruction and a camera image of a robot workspace as input, and predict (normalized) robot actions consisting of 7-DoF end-effector deltas of the form (x, y, z, roll, pitch, yaw, gripper). To execute on an actual robot platform, actions need to be un-normalized subject to statistics computed on a per-robot, per-dataset basis. Instructions on how to run Nora is available on https://github.com/declare-lab/nora.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Нельзя запустить

Модели для роботов не запускаются как сервис инференса.

Класс архитектуры
Qwen2_5_VLForConditionalGeneration
Ревизия весов
1fd1260

0 моделей