/ Модель

Характеристики

Контекст
4 096 токенов
Параметры
12,9 млрд
Размер весов
26 ГБ
Лицензия
CC BY-NC 4.0
Архитектура
llama · dense
Опубликована
17 окт 2023

rpguild-chatml-13b

Генерация текстаТекст → текст3 профессии

Модель Llama на 12,9 млрд параметров для генерации творческих ролевых диалогов в формате ChatML.

63скачиваний за 30 дней9лайковвеса обновлены18 окт 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

chargoddard/rpguild-chatml-13b — языковая модель для ролевых диалогов, обученная на примерно 50 тысячах примеров ролевых сессий, написанных людьми. В основе лежит плотная архитектура Llama с 12,9 млрд параметров; модель использует формат запросов ChatML и принимает текстовый ввод, генерируя текст. Указанный максимальный контекст составляет 4096 токенов, а карточка модели отмечает английский язык.

Модель предназначена для ведения творческих ролевых сцен и продолжения диалогов с учётом меняющегося сюжета. По описанию автора, она склонна писать реплики за пользователя и часто оформляет речь персонажей в кавычках. Распространяется по лицензии CC BY-NC 4.0, которая ограничивает коммерческое использование.

Сценарии применения

  • продолжение ролевой сцены в текстовом чате
  • отыгрыш персонажа в диалоге
  • генерация реплик персонажей для интерактивной истории

Ограничения

Модель может писать реплики за пользователя и часто помещает речь в кавычки. Лицензия CC BY-NC 4.0 запрещает коммерческое использование.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

It's a roleplay model! Trained on ~50k examples of human written roleplay sessions. Not a hint of gpt-flavor writing. Very creative and very able to roll with the punches.

Does tend to speak for you more than it should and has a very, very strong bias towards speech in quotes.

Uses ChatML prompt format, with optional length suffixes:

<|im_start|>system
Enter roleplay mode. You are Steve.

Steve is a nasty little man and solves all his problems by punching people in the face.<|im_end|>
<|im_start|>Gundalf, Gandalf's cousin with a gun
Gundalf runs frantically up to Steve and begins yelling. "We have a big problem, Steve!"<|im_end|>
<|im_start|>Steve (Length: short)
"What is it now Gundalf? Do you want me to punch you in the face?" Steve asked, looking down at him. He was pretty sure that this guy wasn't worth the trouble of punching him in the face, but he didn't like to leave loose ends hanging either.

"There's been an incident," Gundalf said quickly, "A dwarf has stolen some gold from Smaug."

"Well I don't care about any of those things," Steve responded, turning away. <|im_end|> 

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
4567dbf

0 моделей