/ Модель

Характеристики

Контекст
2 048 токенов
Параметры
12,9 млрд
Размер весов
26 ГБ
Архитектура
llama · dense
Опубликована
19 июл 2023

llama-2-13b-guanaco-fp16

Генерация текстаТекст → текст6 профессий

Дообученная на базе Llama 2 13B версия Guanaco для диалоговой генерации текста.

70скачиваний за 30 дней12лайковвеса обновлены20 июл 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Это версия Guanaco на базе Llama 2 с 13 млрд параметров, дообученная автором репозитория на исходной Llama 2 13B с помощью официальных скриптов из проекта QLoRA. Модель предназначена для генерации текста в диалоговом формате Guanaco; в репозитории размещены объединённые веса в формате FP16. Архитектура — плотная LlamaForCausalLM, контекст — 2048 токенов. Карточка указывает английский язык.

Модель можно использовать для диалоговых ответов и генерации текста на английском языке. В метаданных также указан тег text-classification, однако описание модели и её причинная языковая архитектура указывают на основное назначение text-generation. Модель подчиняется ограничениям использования исходной Llama 2; конкретный идентификатор лицензии в предоставленных данных отсутствует. Автор не предоставляет гарантий качества или пригодности.

Сценарии применения

  • генерация ответов в диалоге на английском языке
  • чат-бот на основе модели Guanaco
  • создание черновиков и продолжение английского текста

Ограничения

Контекст ограничен 2048 токенами. Модель наследует ограничения использования исходной Llama 2; автор не даёт гарантий качества или пригодности.

Для каких профессий подходит6

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

This is a Llama-2 version of Guanaco. It was finetuned from the base Llama-13b model using the official training scripts found in the QLoRA repo. I wanted it to be as faithful as possible and therefore changed nothing in the training script beyond the model it was pointing to. The model prompt is therefore also the same as the original Guanaco model.

This repo contains the merged f16 model. The QLoRA adaptor can be found here.

A 7b version of the model can be found here.

Legal Disclaimer: This model is bound by the usage restrictions of the original Llama-2 model. And comes with no warranty or gurantees of any kind.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
feb7ef4

0 моделей