/ Модель

Характеристики

Контекст
4 096 токенов
Параметры
12,9 млрд
Размер весов
26 ГБ
Архитектура
llama · dense
Опубликована
22 окт 2023

Thespis-13b-v0.4

Генерация текстаТекст → текст3 профессии

Thespis-13b-v0.4 — модель Llama на 12,9 млрд параметров для многоходовых ролевых диалогов в Ooba и SillyTavern.

27скачиваний за 30 дней5лайковвеса обновлены23 окт 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Thespis-13b-v0.4 — личный проект на архитектуре Llama, содержащий 12,9 млрд параметров и предназначенный для генерации текста в многоходовых ролевых диалогах. Модель рассчитана на сценарии интернет-ролевых игр с персонажами и использует стандартный чат-шаблон; для оформления действий лучше всего подходит разметка звёздочками, а реплики рекомендуется писать без кавычек.

Для обучения использованы отфильтрованные примеры из Claude Multiround Chat, Pippa, Puffin и Airoboros 3.1, а также отобранные вручную ролевые диалоги. Модель работает с форматами чата Ooba и SillyTavern и имеет контекст до 4096 токенов. В README заявлена поддержка как безопасных, так и откровенных ролевых сценариев. Лицензия в предоставленных данных не указана.

Сценарии применения

  • многоходовая ролевая переписка с персонажами
  • интернет-ролевая игра с описанием действий между звёздочками
  • создание диалогового персонажа для SillyTavern
  • ролевой чат через интерфейс Ooba

Ограничения

Для наиболее подходящего формата рекомендуется размечать действия звёздочками и писать реплики без кавычек. Контекст ограничен 4096 токенами.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

image/png

This model is a personal project. It uses a vanilla chat template and is focused on providing multiturn sfw and nsfw RP experience.

This model works best with internet style RP using standard markup with asterisks surrounding actions and no quotes around dialogue.

It uses the following data:

  • 3000 samples from Claude Multiround Chat 30k dataset ( 45 token length or greater. Coding and math filtered out. )
  • 3000 samples from Pippa Dataset ( 90 token length or greater. Filtered for responses which did not contain quotes and contained at least one asterisk. )
  • 2200 samples from Puffin Dataset ( 90 token length or greater. Coding and math filtered out. )
  • 700 samples from Airoboros 3.1 ( 1500 token length or greater. Writing samples only. )
  • 4700 samples of hand curated RP conversation with various characters.

Works with standard chat format for Ooba or SillyTavern.

Prompt Format: Chat

{System Prompt}

Username: {Input}
BotName: {Response}
Username: {Input}
BotName: {Response}

Turn Template (for Ooba Instruct):

You can either bake usernames into the prompt directly for ease of use or programatically add them if running through the API to use as a chatbot.

<|user|>{Username}: <|user-message|>\n<|bot|>{BotName}: <|bot-message|>\n

Examples

image/png

image/png

image/png

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
d368bca

0 моделей