/ Модель

Характеристики

Контекст
4 096 токенов
Параметры
12,9 млрд
Размер весов
26 ГБ
Архитектура
llama · dense
Опубликована
30 окт 2023

Thespis-13b-v0.5

Генерация текстаТекст → текст3 профессии

Текстовая модель на базе Llama для многоходовых ролевых диалогов, включая SFW- и NSFW-сценарии.

23скачиваний за 30 дней4лайкавеса обновлены4 ноя 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Thespis-13b-v0.5 — личный проект автора cgato: текстовая модель диалоговой генерации на архитектуре Llama с 12,9 млрд параметров и контекстом до 4096 токенов. Она дообучена для многоходовых ролевых диалогов, в том числе SFW- и NSFW-сценариев, и рассчитана на ролевое общение в интернет-стиле: действия оформляются звёздочками, реплики — без кавычек. Для обучения использованы отфильтрованные текстовые выборки из Claude Multiround Chat, Puffin, Airoboros 3.1 и Augmental, а также вручную отобранные ролевые диалоги с разными персонажами.

Модель принимает текстовые сообщения в обычном формате чата и генерирует продолжение диалога. README описывает шаблоны для Ooba и SillyTavern, а также вариант шаблона для чат-ботов. Модель предназначена прежде всего для ролевого общения; кодирование и математика исключались из части обучающих выборок, поэтому эти задачи не являются заявленной специализацией. Репозиторий содержит веса PyTorch и помечен как не для всех аудиторий. Лицензия в предоставленных данных не указана.

Сценарии применения

  • многоходовое ролевое общение с персонажами
  • ролевая переписка в SillyTavern
  • создание ролевого чат-бота для Ooba
  • генерация диалогов с описанием действий между звёздочками

Ограничения

Модель настроена на ролевые диалоги и не специализируется на кодировании или математике; желаемый стиль использует действия в звёздочках и реплики без кавычек. Репозиторий помечен как не для всех аудиторий.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

image/png

This model is a personal project. It uses a vanilla chat template and is focused on providing multiturn sfw and nsfw RP experience.

This model works best with internet style RP using standard markup with asterisks surrounding actions and no quotes around dialogue.

It uses the following data:

  • 1500 samples from Claude Multiround Chat 30k dataset ( 90 token length or greater. Coding and math filtered out. )
  • 2200 samples from Puffin Dataset ( 90 token length or greater. Coding and math filtered out. )
  • 700 samples from Airoboros 3.1 ( 1500 token length or greater. Writing samples only. )
  • 900 samples from the Augmental Dataset ( 90 token length or greater )
  • 4200 samples of hand curated RP conversation with various characters.

Works with standard chat format for Ooba or SillyTavern.

Prompt Format: Chat ( The default Ooba template and Silly Tavern Template )

{System Prompt}

Username: {Input}
BotName: {Response}
Username: {Input}
BotName: {Response}

Ooba ( Set it to Chat, select a character and go. )

image/png

Silly Tavern Settings ( Default )

image/png

Turn Template (for Ooba Instruct if making a Discord bot or Some other Many to one Chat):

You can either bake usernames into the prompt directly for ease of use or programatically add them if running through the API to use as a chatbot.

User string: ( Leave empty if populating username into prompt through a script. Put in your username if its a 1 on 1 convo.) Ex. "DiscordUser1: "
Bot String: ( The bots name, followed by a colon and a space.) Ex. "Mayo: "
Context: ( Your bots system prompt, follow by a newline. )

<|user|><|user-message|>\n<|bot|><|bot-message|>\n

Examples

SFW Roleplay image/png

NSFW Roleplay image/png

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
3dadea1

0 моделей