/ Модель

Характеристики

Контекст
4 096 токенов
Параметры
6,6 млрд
Размер весов
13,5 ГБ
Лицензия
Llama 2
Архитектура
llama · dense
Опубликована
27 сен 2023

rank_vicuna_7b_v1

Генерация текстаТекст → текст3 профессии

Дообученная на диалогах ShareGPT модель Llama 2 от Castorini для чат-генерации и исследований информационного поиска.

508скачиваний за 30 дней4лайкавеса обновлены27 сен 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

RankVicuna 7B v1 — авторегрессионная языковая модель на архитектуре Transformer семейства Llama, разработанная Castorini. Модель дообучена на базе Llama 2 на пользовательских диалогах ShareGPT с дополнительной аугментацией данных; объём модели — 6,6 млрд параметров, контекст — до 4096 токенов.

Модель предназначена для исследований на стыке больших языковых моделей и информационного поиска. Её можно применять как чат-ассистента и для экспериментов с ранжированием документов и результатов поиска; README сообщает об оценке на DL19 и DL20. В метаданных основная задача указана как генерация текста, поэтому прямое ранжирование как отдельная задача Hugging Face не подтверждено.

Модель принимает текст и генерирует текст; заявленный язык карточки — английский. Для использования действуют условия Llama 2 Community License Agreement. Результаты оценки и пригодность для конкретных сценариев поиска следует проверять на собственных данных.

Сценарии применения

  • эксперименты с LLM в информационном поиске
  • оценка генеративной модели на наборах DL19 и DL20
  • создание чат-ассистента на основе диалогов ShareGPT

Ограничения

README сообщает об оценке на DL19 и DL20, но не приводит здесь численных результатов. Применимость к другим языкам и сценариям поиска по имеющимся данным не подтверждена.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

RankVicuna Model Card

Model Details

RankVicuna is a chat assistant trained by fine-tuning Llama 2 on user-shared conversations collected from ShareGPT.

  • Developed by: Castorini
  • Model type: An auto-regressive language model based on the transformer architecture
  • License: Llama 2 Community License Agreement
  • Finetuned from base model: Llama 2

This specific model is a 7B variant and is trained with data augmentation.

Model Sources

Uses

The primary use of RankVicuna is research at the intersection of large language models and retrieval. The primary intended users of the model are researchers and hobbyists in natural language processing and information retrieval.

Training Details

RankVicuna is finetuned from lmsys/vicuna-7b-v1.5 with supervised instruction fine-tuning.

Evaluation

RankVicuna is currently evaluated on DL19/DL20. See more details in our paper.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
cabe046

0 моделей