/ Модель

Характеристики

Контекст
4 096 токенов
Параметры
12,9 млрд
Размер весов
26 ГБ
Архитектура
llama · dense
Базовая модель
LLaMA2-13B-Erebus-v3
Библиотека
transformers
Опубликована
4 июн 2024

MysticGem-v1.3-L2-13B

Генерация текстаТекст → текст3 профессии

Объединённая 13-миллиардная модель Llama для генерации текста, ролевых диалогов и написания историй, в том числе со взрослыми темами.

16скачиваний за 30 дней3лайкавеса обновлены6 июн 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

MysticGem-v1.3-L2-13B — объединённая текстовая модель на архитектуре Llama, созданная автором репозитория с помощью mergekit из пяти моделей: KoboldAI/LLaMA2-13B-Erebus-v3, Locutusque/Orca-2-13b-SFT-v4, Sao10K/Stheno-Inverted-1.2-L2-13B, Walmart-the-bag/MysticFusion-13B и Undi95/Amethyst-13B. Линейное слияние выполнено с указанными в карточке весами; модель содержит 12,9 млрд параметров и рассчитана на генерацию текста, следование базовым инструкциям и создание историй.

Автор позиционирует её для ролевых сценариев и художественного письма, включая взрослые темы. Карточка указывает формат prompt Alpaca. Репозиторий содержит веса Safetensors, а также перечисляет сторонние и авторские квантизованные сборки GGUF. Контекст модели — 4096 токенов. Основной язык и лицензия в предоставленных данных не установлены.

Сценарии применения

  • ролевые диалоги с вымышленными персонажами
  • написание художественных историй
  • продолжение заданного текста
  • ответы на базовые инструкции
  • создание диалогов для взрослых сценариев

Ограничения

Контекст ограничен 4096 токенами; в предоставленных данных не указаны поддерживаемые языки и лицензия.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

MysticGem-v1.3-L2-13B

RP Model, pretty good result!

Probably final. Smart, novel, lewd etc etc.

Rank no.1 chaiverse for 13B

image/png

Thanks mradermacher for the quants

Thanks Ransss for the quant

Quants

merge

This is a merge of pre-trained language models created using mergekit.

Merge Details

Merge Method

This model was merged using the linear merge method.

Models Merged

The following models were included in the merge:

Configuration

The following YAML configuration was used to produce this model:

models:
  - model: Undi95/Amethyst-13B
    parameters:
      weight: 0.3
  - model: Walmart-the-bag/MysticFusion-13B
    parameters:
      weight: 0.35
  - model: Sao10K/Stheno-Inverted-1.2-L2-13B
    parameters:
      weight: 0.15
  - model: KoboldAI/LLaMA2-13B-Erebus-v3
    parameters:
      weight: 0.1
  - model: Locutusque/Orca-2-13b-SFT-v4
    parameters:
      weight: 0.1
merge_method: linear
dtype: bfloat16

Prompt Format (Alpaca):

Below is an instruction that describes a task. Write a response that appropriately completes the request.

### Instruction:
Take the role of {{char}} in a play where you leave a lasting impression on {{user}}. Never skip or gloss over {{char}}'s actions.

### Instruction:
{prompt}
### Response:
{output}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
65ee9d7

0 моделей