/ Модель

Характеристики

Контекст
262 144 токена
Размер весов
62,1 ГБ
Лицензия
Apache 2.0
Архитектура
qwen3_vl_moe · dense
Библиотека
transformers
Опубликована
9 фев 2026

UI-Venus-1.5-30B-A3B

Изображение и текст → текст3 профессии

Мультимодальный GUI-агент inclusionAI, который понимает скриншоты и текстовые инструкции и выполняет навигацию в мобильных и веб-интерфейсах.

1 292скачиваний за 30 дней37лайковвеса обновлены11 фев 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Изображение → текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки1

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

  • likaixin/ScreenSpot-Pro

    score · выше — лучше

    Результат

    69,6

    eviews_windows 96word_macos 86,9powerpoint_windows 85,4
    Hugging Face Leaderboards

    Публичная таблицаревизия не подтверждена

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

UI-Venus-1.5-30B-A3B — мультимодальная модель GUI-агента от inclusionAI на архитектуре Qwen3-VL-MoE. Она принимает изображения экранов и текстовые инструкции, чтобы находить элементы интерфейса и выполнять многошаговую навигацию в мобильных приложениях и веб-среде. Модель обучена на данных для понимания графических интерфейсов, а её итоговая версия объединяет специализированные модели для привязки элементов, веба и мобильных задач.

В README заявлены высокие результаты на бенчмарках ScreenSpot-Pro, VenusBench-GD, AndroidWorld и WebVoyager, а также навигация в более чем 40 китайских мобильных приложениях. Репозиторий содержит веса Safetensors; для развёртывания README рекомендует vLLM и Transformers. Лицензия — Apache-2.0. Модель предназначена для создания агентов, которые управляют интерфейсом по скриншотам и инструкциям.

Хотя в названии указано 30B-A3B, метаданные не содержат числа параметров или длины контекста. Заявления о результатах приведены в README; независимая проверка в предоставленных данных отсутствует.

Сценарии применения

  • поиск нужной кнопки или элемента на скриншоте интерфейса
  • выполнение пошаговых инструкций в мобильном приложении
  • автоматизация действий в веб-интерфейсе
  • навигация по интерфейсу Android по скриншотам
  • проверка расположения элементов в графическом интерфейсе

Ограничения

В предоставленных материалах не описаны конкретные ограничения модели. Успешность выполнения действий в реальной среде может зависеть от интерфейса и сценария; приведённые показатели основаны на бенчмарках из README.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

UI-Venus-1.5 model

This repository contains the UI-Venus model from the report UI-Venus-1.5 Technical Report. UI-Venus 1.5 is a unified, end-to-end GUI Agent designed for robust real-world applications. The model family includes two dense (2B/8B) and one MoE (30B-A3B) variants to meet various downstream scenarios.

License Report Website GitHub Hugging Face


Figure: Performance of UI-Venus 1.5 across multiple benchmarks. UI-Venus-1.5 achieves State-of-the-Art (SOTA) results on key grounding benchmarks (ScreenSpot-Pro, VenusBench-GD, OSWorld-G, UI-Vision) and agent benchmarks (AndroidWorld, AndroidLab, VenusBench-Mobile).

Model Description

Figure: The Four-Stage Training Pipeline of UI-Venus-1.5. Starting from the Qwen3-VL Series, the model undergoes a progressive training curriculum comprising: (1) Mid-Training with large-scale GUI data for domain knowledge injection; (2) Offline-RL with task-specific optimization across grounding, mobile, and web objectives; (3) Online-RL to further enhance navigation capabilities in complex, real-world scenarios; and (4) Model Merge to unify the specialized models into the final UI-Venus-1.5.

Compared to our previous version(UI-Venus 1.0), UI-Venus-1.5 introduces three key technical advances:

  • Mid-Training Stage: 10B tokens across 30+ datasets for foundational GUI semantics
  • Online RL: Full-trajectory rollouts for long-horizon dynamic navigation
  • Model Merging: Unified agent combining grounding, web, and mobile specialists

Extensive evaluations demonstrate that UI-Venus-1.5 establishes new state-of-the-art performance on benchmarks such as ScreenSpot-Pro (69.6), VenusBench-GD (75.0), and AndroidWorld (77.6), significantly outperforming previous strong baselines. In addition, UI-Venus-1.5 demonstrates robust navigation capabilities across 40+ Chinese mobile apps, effectively executing user instructions in real-world scenarios.

Quick Start

You can deploy the model using vLLM (requires vllm>=0.11.0 and transformers>=4.57.0):

# Install vLLM
pip install vllm

# Start vLLM API server
python -m vllm.entrypoints.openai.api_server \
    --model inclusionAI/UI-Venus-1.5-30B-A3B \
    --served-model-name UI-Venus-1.5-30B-A3B \
    --host 0.0.0.0 \
    --port 8000 \
    --tensor-parallel-size 2 \
    --trust-remote-code

The model will be served at http://localhost:8000/v1.

Results

Grounding

  • Strong Overall Grounding: UI-Venus-1.5-30B-A3B achieves state-of-the-art results on most benchmarks, leading VenusBench-GD (75.0%), ScreenSpot-Pro (69.6%), OSWorld-G-R (76.4%), OSWorld-G (70.6%), and UI-Vision (54.7%), while remaining highly competitive on ScreenSpot-V2 (96.2%, second-best, 0.3% behind MAI-UI-32B).
  • Consistent Scaling Gains: Increasing model scale yields steady improvements across all benchmarks (e.g., ScreenSpot-Pro: 57.7% -> 68.4% -> 69.6% for 2B/8B/30B-A3B).
  • Broad Generalization Across Tasks: UI-Venus shows robust performance on diverse grounding settings, from refusal-aware evaluation in VenusBench-GD to fine-grained professional UI layouts in ScreenSpot-Pro, and remains competitive on instruction-intensive MMBench (88.6%).

Mobile Navigation

  • Superior End-to-End Performance: UI-Venus-1.5-30B-A3B achieves state-of-the-art or comparable results across a diverse range of GUI agent benchmarks, including Android World (77.6%), Android Lab (55.1%/68.1%), VenusBench-Mobile (21.5%), and WebVoyager (76.0%). It consistently outperforms both specialized GUI models (e.g., MAI-UI-32B) and leading general-purpose VLMs (e.g., GPT-4o, Qwen3-VL), establishing a new performance ceiling for autonomous agents.
  • Significant Architectural Efficiency and Scaling: Increasing the model scale leads to consistent performance gains across all benchmarks. Notably, the UI-Venus-1.5 family exhibits remarkable efficiency; our 8B model already surpasses the previous generation's 72B variant on both Android Lab (up to 5.8% improvement) and VenusBench-Mobile (16.1% vs. 15.4%), demonstrating the effectiveness of our updated training methodology.
  • Robust Cross-Platform Generalization: UI-Venus demonstrates exceptional adaptability across different operating systems and input modalities. It excels not only in programmatic Android environments but also in dynamic web navigation (WebVoyager). Furthermore, the models show strong visual-only reasoning capabilities, outperforming XML-augmented baselines in Android Lab even when relying solely on raw screenshots.

Browser Navigation

Citation

Please consider citing if you find our work useful:

@misc{venusteam2026uivenus15technicalreport,
      title={UI-Venus-1.5 Technical Report}, 
      author={Venus Team and Changlong Gao and Zhangxuan Gu and Yulin Liu and Xinyu Qiu and Shuheng Shen and Yue Wen and Tianyu Xia and Zhenyu Xu and Zhengwen Zeng and Beitong Zhou and Xingran Zhou and Weizhi Chen and Sunhao Dai and Jingya Dou and Yichen Gong and Yuan Guo and Zhenlin Guo and Feng Li and Qian Li and Jinzhen Lin and Yuqi Zhou and Linchao Zhu and Liang Chen and Zhenyu Guo and Changhua Meng and Weiqiang Wang},
      year={2026},
      eprint={2602.09082},
      archivePrefix={arXiv},
      primaryClass={cs.CV},
      url={https://arxiv.org/abs/2602.09082}, 
}

@misc{gu2025uivenustechnicalreportbuilding,
      title={UI-Venus Technical Report: Building High-performance UI Agents with RFT}, 
      author={Zhangxuan Gu and Zhengwen Zeng and Zhenyu Xu and Xingran Zhou and Shuheng Shen and Yunfei Liu and Beitong Zhou and Changhua Meng and Tianyu Xia and Weizhi Chen and Yue Wen and Jingya Dou and Fei Tang and Jinzhen Lin and Yulin Liu and Zhenlin Guo and Yichen Gong and Heng Jia and Changlong Gao and Yuan Guo and Yong Deng and Zhenyu Guo and Liang Chen and Weiqiang Wang},
      year={2025},
      eprint={2508.10833},
      archivePrefix={arXiv},
      primaryClass={cs.CV},
      url={https://arxiv.org/abs/2508.10833}, 
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры
Qwen3VLMoeForConditionalGeneration
Ревизия весов
b6e8f31

0 моделей