/ Модель

Характеристики

Контекст
2 048 токенов
Параметры
6,6 млрд
Размер весов
16,4 ГБ
Лицензия
MIT
Архитектура
mplug_owl2 · dense
Опубликована
15 мая 2024

Compare2Score

Генерация текстаТекст → текст3 профессии

Compare2Score — модель mPLUG-Owl2 на 6,6 млрд параметров для извлечения признаков и задач сравнения с контекстом 2048 токенов.

612скачиваний за 30 дней5лайковвеса обновлены24 авг 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Compare2Score — модель семейства mPLUG-Owl2, опубликованная пользователем q-future. Карточка показывает загрузку через AutoModelForCausalLM и предназначение для оценки сравнения; для извлечения признаков доступен pipeline feature-extraction. Модель содержит 6,6 млрд параметров, работает с библиотеками Transformers и PyTorch и имеет нативный контекст длиной 2048 токенов.

Модель может быть полезна для извлечения признаков и генерации текста в сценариях сравнения и оценивания. README не описывает подробно формат входа, языки, метод обучения или результаты оценки качества. Репозиторий распространяется по лицензии MIT.

Сценарии применения

  • извлечение признаков для сравнения объектов или ответов
  • подготовка представлений текста для оценки сходства
  • генерация текста в задачах сравнения

Ограничения

README не приводит результаты бенчмарков и не уточняет языковую поддержку или конкретный формат входных данных.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

The model corresponds to Compare2Score.

Quick Start with AutoModel

import requests
import torch
from transformers import AutoModelForCausalLM

model = AutoModelForCausalLM.from_pretrained("q-future/Compare2Score", trust_remote_code=True, attn_implementation="eager", 
                                             torch_dtype=torch.float16, device_map="auto")

from PIL import Image
image_path_url = "https://raw.githubusercontent.com/Q-Future/Q-Align/main/fig/singapore_flyer.jpg"
print("The quality score of this image is {}".format(model.score(image_path_url)) 

Evaluation with GitHub

git clone https://github.com/Q-Future/Compare2Score.git
cd Compare2Score
pip install -e .
from q_align import Compare2Scorer
from PIL import Image

scorer = Compare2Scorer()
image_path = "figs/i04_03_4.bmp"
print("The quality score of this image is {}.".format(scorer(image_path)))

Citation

@article{zhu2024adaptive,
  title={Adaptive Image Quality Assessment via Teaching Large Multimodal Model to Compare},
  author={Zhu, Hanwei and Wu, Haoning and Li, Yixuan and Zhang, Zicheng and Chen, Baoliang and Zhu, Lingyu and Fang, Yuming and Zhai, Guangtao and Lin, Weisi and Wang, Shiqi},
  journal={arXiv preprint arXiv:2405.19298},
  year={2024},
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

Модели нужен код из репозитория; автор пока не в списке доверенных организаций.

Класс архитектуры
MPLUGOwl2LlamaForCausalLM
Ревизия весов
917f39d

0 моделей