/ Модель

Характеристики

Контекст
2 048 токенов
Параметры
12,9 млрд
Размер весов
26 ГБ
Архитектура
llama · dense
Опубликована
12 апр 2023

Base-GPT4-x-Alpaca-Roleplay-Lora

Генерация текстаТекст → текст3 профессии

Модель Llama на 12,9 млрд параметров, дообученная для ролевых диалогов и ответов на инструкции.

45скачиваний за 30 дней45лайковвеса обновлены22 апр 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

teknium/Base-GPT4-x-Alpaca-Roleplay-Lora — текстовая генеративная модель на архитектуре Llama, дообученная для ролевого общения. По карточке, она основана на GPT4-x-Alpaca, прошла дополнительное LoRA-дообучение на инструкциях для ролевых сценариев, созданных GPT-4, после чего адаптер был объединён с моделью. Метаданные указывают 12,9 млрд параметров и формат PyTorch.

Модель предназначена для ответов на инструкции в формате Alpaca/GPT4-x-Alpaca и для диалогов от лица персонажей. Карточка предупреждает, что новые версии Transformers могут приводить к некорректной генерации, поэтому совместимость с актуальной библиотекой может быть ограничена. Сведения о лицензии в предоставленных данных отсутствуют.

Сценарии применения

  • ведение ролевого диалога от лица персонажа
  • создание ответов для ролевого чат-бота
  • генерация текста по инструкциям в формате Alpaca
  • продолжение диалога в заданном сценарии

Ограничения

В README отмечена возможность некорректной генерации с новыми версиями Transformers; также приведённая карточка не сообщает лицензию.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

This is a llama-13B based model. (sorry, I forgot to put it in the model name)

Base Model: GPT4-x-Alpaca full fine tune by Chavinlo -> https://huggingface.co/chavinlo/gpt4-x-alpaca
LORA fine tune using the Roleplay Instruct from GPT4 generated dataset -> https://github.com/teknium1/GPTeacher/tree/main/Roleplay
LORA Adapter Only: https://huggingface.co/ZeusLabs/gpt4-x-alpaca-rp-lora/tree/main/gpt-rp-instruct-1

Merged LORA to the model.

FYI Latest HF Transformers generates BROKEN generations. Try this instead if your generations are terrible (first uninstall transformers): pip install git+https://github.com/huggingface/transformers@9eae4aa57650c1dbe1becd4e0979f6ad1e572ac0

Instruct it same way as alpaca / gpt4xalpaca:

### Instruction:
<prompt>
### Response:

or

### Instruction:
<prompt>
### Input:
<specific data to manipulate for the instruction
### Response:

For a better idea of prompting it for roleplay, check out the roleplay discord bot code I made here: https://github.com/teknium1/alpaca-roleplay-discordbot Here is an example:

### Instruction:
Role play as character that is described in the following lines. You always stay in character.
{"Your name is " + name + "." if name else ""}
{"Your backstory and history are: " + background if background else ""}
{"Your personality is: " + personality if personality else ""}
{"Your current circumstances and situation are: " + circumstances if circumstances else ""}
{"Your common greetings are: " + common_greeting if common_greeting else ""}
Remember, you always stay on character. You are the character described above.
{past_dialogue_formatted}
{chat_history if chat_history else "Chatbot: Hello!"}

Always speak with new and unique messages that haven't been said in the chat history.

Respond to this message as your character would:
### Input:
{text}
### Response:
{name}:


tags:

  • llama
  • alpaca
  • gpt4

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
981ea9f

0 моделей