Характеристики

Контекст: 8 192 токена
Параметры: 7,5 млрд
Размер весов: 16,1 ГБ
Архитектура: llama · dense
Базовая модель: L3-Umbral-Mind-RP-v2.0-8B
Библиотека: transformers
Опубликована: 10 июл 2024

Ссылки

Hugging Face

L3-Umbral-Mind-RP-v3.0-8B

Casual-Autopsy

Генерация текстаТекст → текст3 профессии

Слитая диалоговая модель Llama 3 для ролевых игр с тяжёлыми эмоциональными темами и сценариями спасения персонажей.

664скачиваний за 30 дней37лайковвеса обновлены12 июл 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

Добавьте модель в бенчмарк
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Опишите свои задачи
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Запустите и опубликуйте
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Открыть конструктор бенчмарка

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

L3-Umbral-Mind-RP-v3.0-8B — диалоговая языковая модель Casual-Autopsy, собранная с помощью mergekit из нескольких моделей семейства Llama 3. Она предназначена для ролевых диалогов на тяжёлые темы, включая психические расстройства, самоповреждение, травму и суицид, а также сценарии спасения и обратного спасения персонажа.

Модель содержит 7,5 млрд параметров, использует плотную архитектуру LlamaForCausalLM и принимает текст для генерации текста. Длина контекста — 8192 токена. Для ролевого отыгрыша автор рекомендует формат со звёздочками для действий и кавычками для реплик; другие форматы могут вызывать проблемы. В README также упомянуты варианты GGUF, подготовленные сторонним автором.

Модель рассчитана на художественные ролевые сценарии с тяжёлыми эмоциональными темами и может не поддерживать ожидаемый тон в форматах, отличных от рекомендованного. Лицензия в предоставленных данных не указана.

Сценарии применения

ролевая игра о переживании травмы
ролевые диалоги о психических расстройствах
сценарии самоповреждения и кризисных ситуаций в художественном RP
ролевые сюжеты о спасении или поддержке персонажа
генерация диалогов в формате действий со звёздочками и реплик в кавычках

Ограничения

Автор рекомендует формат RP со звёздочками и кавычками; другие форматы могут вызывать проблемы. Модель предназначена для художественных ролевых сценариев и не заявлена как средство профессиональной психологической помощи.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

IV.9Отраслевые задачиМедиа, журналистика, культура, архивы и игрыAI помогает создавать, искать, сохранять и персонализировать медиа, культурный и игровой контент.44 задачи14 938моделей I.5Универсальные способностиСоздание и редактирование текстаAI помогает создавать и улучшать текстовые материалы, сохраняя смысл и требования автора.18 задач44 385моделей I.7Универсальные способностиРечь, диалоги и встречиAI помогает понимать разговорную речь, поддерживать диалог и превращать встречи в структурированные результаты.17 задач26 923модели

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Merge

This is a merge of pre-trained language models created using mergekit.

Merge Details

The goal of this merge was to make an RP model better suited for role-plays with heavy themes such as but not limited to:

Mental illness
Self-harm
Trauma
Suicide

I hated how RP models tended to be overly positive and hopeful with role-plays involving such themes, but thanks to failspy/Llama-3-8B-Instruct-MopeyMule this problem has been lessened considerably.

If you're an enjoyer of savior/reverse savior type role-plays like myself, then this model is for you.

Usage Info

This model is meant to be used with asterisks/quotes RPing formats, any other format that isn't asterisks/quotes is likely to cause issues

Quants

Weighted GGUFs by mradermacher
Static GGUFs by mradermacher

Models Merged

The following models were included in the merge:

Secret Sauce

The following YAML configurations were used to produce this model:

Umbral-Mind-1-pt.1

models:
  - model: Casual-Autopsy/L3-Umbral-Mind-RP-v2.0-8B
  - model: Cas-Warehouse/Llama-3-MopeyMule-Blackroot-8B
    parameters:
      density: 0.5
      weight: [0.33, 0.0825, 0.0825, 0.0825, 0.0825]
  - model: tannedbum/L3-Nymeria-Maid-8B
    parameters:
      density: 0.5
      weight: [0.0825, 0.33, 0.0825, 0.0825, 0.0825]
  - model: bluuwhale/L3-SthenoMaidBlackroot-8B-V1
    parameters:
      density: 0.5
      weight: [0.0825, 0.0825, 0.33, 0.0825, 0.0825]
  - model: tannedbum/L3-Nymeria-8B
    parameters:
      density: 0.5
      weight: [0.0825, 0.0825, 0.0825, 0.33, 0.0825]
  - model: Cas-Warehouse/Llama-3-SOVL-MopeyMule-8B
    parameters:
      density: 0.5
      weight: [0.0825, 0.0825, 0.0825, 0.0825, 0.33]
merge_method: dare_ties
base_model: Casual-Autopsy/L3-Umbral-Mind-RP-v2.0-8B
parameters:
  normalize: false
  int8_mask: true
dtype: bfloat16

Umbral-Mind-1-pt.2

models:
  - model: Casual-Autopsy/L3-Umbral-Mind-RP-v2.0-8B
  - model: Cas-Warehouse/Llama-3-MopeyMule-Blackroot-8B
    parameters:
      gamma: 0.01
      density: 0.9
      weight: [0.0825, 0.0825, 0.0825, 0.0825, 0.33]
  - model: tannedbum/L3-Nymeria-Maid-8B
    parameters:
      gamma: 0.01
      density: 0.9
      weight: [0.0825, 0.0825, 0.0825, 0.33, 0.0825]
  - model: bluuwhale/L3-SthenoMaidBlackroot-8B-V1
    parameters:
      gamma: 0.01
      density: 0.9
      weight: [0.0825, 0.0825, 0.33, 0.0825, 0.0825]
  - model: tannedbum/L3-Nymeria-8B
    parameters:
      gamma: 0.01
      density: 0.9
      weight: [0.0825, 0.33, 0.0825, 0.0825, 0.0825]
  - model: Cas-Warehouse/Llama-3-SOVL-MopeyMule-8B
    parameters:
      gamma: 0.01
      density: 0.9
      weight: [0.33, 0.0825, 0.0825, 0.0825, 0.0825]
merge_method: breadcrumbs_ties
base_model: Casual-Autopsy/L3-Umbral-Mind-RP-v2.0-8B
parameters:
  normalize: false
  int8_mask: true
dtype: bfloat16

Umbral-Mind-1

models:
  - model: Casual-Autopsy/Umbral-Mind-1-pt.1
  - model: Casual-Autopsy/Umbral-Mind-1-pt.2
merge_method: slerp
base_model: Casual-Autopsy/Umbral-Mind-1-pt.1
parameters:
  t:
    - filter: self_attn
      value: [0.5, 0.3, 0.7, 0.5, 0.7, 0.3, 0.5, 0.3, 0.7, 0.5, 0.7, 0.3, 0.5]
    - filter: mlp
      value: [0.5, 0.7, 0.3, 0.5, 0.3, 0.7, 0.5, 0.7, 0.3, 0.5, 0.3, 0.7, 0.5]
    - value: 0.5
dtype: bfloat16

Umbral-Mind-2-pt.1

models:
  - model: Casual-Autopsy/L3-Umbral-Mind-RP-v1.0-8B
  - model: Cas-Warehouse/Llama-3-Mopeyfied-Psychology-v2
    parameters:
      density: 0.5
      weight: [0.33, 0.0825, 0.0825, 0.0825, 0.0825]
  - model: migtissera/Llama-3-8B-Synthia-v3.5
    parameters:
      density: 0.5
      weight: [0.0825, 0.33, 0.0825, 0.0825, 0.0825]
  - model: Cas-Warehouse/Llama-3-SOVL-MopeyMule-Blackroot-8B
    parameters:
      density: 0.5
      weight: [0.0825, 0.0825, 0.33, 0.0825, 0.0825]
  - model: v000000/L3-8B-Poppy-Sunspice
    parameters:
      density: 0.5
      weight: [0.0825, 0.0825, 0.0825, 0.33, 0.0825]
  - model: Cas-Warehouse/Llama-3-Mopeyfied-Psychology-8B
    parameters:
      density: 0.5
      weight: [0.0825, 0.0825, 0.0825, 0.0825, 0.33]
merge_method: dare_ties
base_model: Casual-Autopsy/L3-Umbral-Mind-RP-v1.0-8B
parameters:
  normalize: false
  int8_mask: true
dtype: bfloat16

Umbral-Mind-2-pt.2

models:
  - model: Casual-Autopsy/L3-Umbral-Mind-RP-v1.0-8B
  - model: Cas-Warehouse/Llama-3-Mopeyfied-Psychology-v2
    parameters:
      gamma: 0.01
      density: 0.9
      weight: [0.0825, 0.0825, 0.0825, 0.0825, 0.33]
  - model: migtissera/Llama-3-8B-Synthia-v3.5
    parameters:
      gamma: 0.01
      density: 0.9
      weight: [0.0825, 0.0825, 0.0825, 0.33, 0.0825]
  - model: Cas-Warehouse/Llama-3-SOVL-MopeyMule-Blackroot-8B
    parameters:
      gamma: 0.01
      density: 0.9
      weight: [0.0825, 0.0825, 0.33, 0.0825, 0.0825]
  - model: Magpie-Align/Llama-3-8B-WizardLM-196K
    parameters:
      gamma: 0.01
      density: 0.9
      weight: [0.0825, 0.33, 0.0825, 0.0825, 0.0825]
  - model: Cas-Warehouse/Llama-3-Mopeyfied-Psychology-8B
    parameters:
      gamma: 0.01
      density: 0.9
      weight: [0.33, 0.0825, 0.0825, 0.0825, 0.0825]
merge_method: breadcrumbs_ties
base_model: Casual-Autopsy/L3-Umbral-Mind-RP-v1.0-8B
parameters:
  normalize: false
  int8_mask: true
dtype: bfloat16

Umbral-Mind-2

models:
  - model: Casual-Autopsy/Umbral-Mind-2-pt.1
  - model: Casual-Autopsy/Umbral-Mind-2-pt.2
merge_method: slerp
base_model: Casual-Autopsy/Umbral-Mind-2-pt.1
parameters:
  t:
    - filter: self_attn
      value: [0.5, 0.3, 0.7, 0.5, 0.7, 0.3, 0.5, 0.3, 0.7, 0.5, 0.7, 0.3, 0.5]
    - filter: mlp
      value: [0.5, 0.7, 0.3, 0.5, 0.3, 0.7, 0.5, 0.7, 0.3, 0.5, 0.3, 0.7, 0.5]
    - value: 0.5
dtype: bfloat16

Umbral-Mind-3-pt.1

models:
  - model: Casual-Autopsy/L3-Umbral-Mind-RP-v0.3-8B
  - model: Cas-Warehouse/Llama-3-SOVL-MopeyMule-8B
    parameters:
      density: 0.5
      weight: [0.33, 0.0825, 0.0825, 0.0825, 0.0825]
  - model: invisietch/EtherealRainbow-v0.3-8B
    parameters:
      density: 0.5
      weight: [0.0825, 0.33, 0.0825, 0.0825, 0.0825]
  - model: bluuwhale/L3-SthenoMaidBlackroot-8B-V1
    parameters:
      density: 0.5
      weight: [0.0825, 0.0825, 0.33, 0.0825, 0.0825]
  - model: crestf411/L3-8B-sunfall-v0.4-stheno-v3.2
    parameters:
      density: 0.5
      weight: [0.0825, 0.0825, 0.0825, 0.33, 0.0825]
  - model: Cas-Warehouse/Llama-3-MopeyMule-Blackroot-8B
    parameters:
      density: 0.5
      weight: [0.0825, 0.0825, 0.0825, 0.0825, 0.33]
merge_method: dare_ties
base_model: Casual-Autopsy/L3-Umbral-Mind-RP-v0.3-8B
parameters:
  normalize: false
  int8_mask: true
dtype: bfloat16

Umbral-Mind-3-pt.2

models:
  - model: Casual-Autopsy/L3-Umbral-Mind-RP-v0.3-8B
  - model: Cas-Warehouse/Llama-3-SOVL-MopeyMule-8B
    parameters:
      gamma: 0.01
      density: 0.9
      weight: [0.0825, 0.0825, 0.0825, 0.0825, 0.33]
  - model: invisietch/EtherealRainbow-v0.3-8B
    parameters:
      gamma: 0.01
      density: 0.9
      weight: [0.0825, 0.0825, 0.0825, 0.33, 0.0825]
  - model: bluuwhale/L3-SthenoMaidBlackroot-8B-V1
    parameters:
      gamma: 0.01
      density: 0.9
      weight: [0.0825, 0.0825, 0.33, 0.0825, 0.0825]
  - model: crestf411/L3-8B-sunfall-v0.4-stheno-v3.2
    parameters:
      gamma: 0.01
      density: 0.9
      weight: [0.0825, 0.33, 0.0825, 0.0825, 0.0825]
  - model: Cas-Warehouse/Llama-3-MopeyMule-Blackroot-8B
    parameters:
      gamma: 0.01
      density: 0.9
      weight: [0.33, 0.0825, 0.0825, 0.0825, 0.0825]
merge_method: breadcrumbs_ties
base_model: Casual-Autopsy/L3-Umbral-Mind-RP-v0.3-8B
parameters:
  normalize: false
  int8_mask: true
dtype: bfloat16

Umbral-Mind-3

models:
  - model: Casual-Autopsy/Umbral-Mind-3-pt.1
  - model: Casual-Autopsy/Umbral-Mind-3-pt.2
merge_method: slerp
base_model: Casual-Autopsy/Umbral-Mind-3-pt.1
parameters:
  t:
    - filter: self_attn
      value: [0.5, 0.3, 0.7, 0.5, 0.7, 0.3, 0.5, 0.3, 0.7, 0.5, 0.7, 0.3, 0.5]
    - filter: mlp
      value: [0.5, 0.7, 0.3, 0.5, 0.3, 0.7, 0.5, 0.7, 0.3, 0.5, 0.3, 0.7, 0.5]
    - value: 0.5
dtype: bfloat16

Umbral-Mind-4

models:
  - model: Casual-Autopsy/Umbral-Mind-1
  - model: Casual-Autopsy/Umbral-Mind-3
merge_method: slerp
base_model: Casual-Autopsy/Umbral-Mind-1
parameters:
  t:
    - value: [0.1, 0.15, 0.2, 0.4, 0.6, 0.4, 0.2, 0.15, 0.1]
dtype: bfloat16

Umbral-Mind-5

models:
  - model: Casual-Autopsy/Umbral-Mind-4
  - model: Casual-Autopsy/Umbral-Mind-2
merge_method: slerp
base_model: Casual-Autopsy/Umbral-Mind-4
parameters:
  t:
    - value: [0.7, 0.5, 0.3, 0.25, 0.2, 0.25, 0.3, 0.5, 0.7]
  embed_slerp: true
dtype: bfloat16

Umbral-Mind-6

models:
  - model: mergekit-community/Umbral-Mind-5
  - model: Casual-Autopsy/Mopey-Omelette
merge_method: slerp
base_model: mergekit-community/Umbral-Mind-5
parameters:
  t:
    - value: [0.2, 0.25, 0.3, 0.4, 0.3, 0.25, 0.2, 0.25, 0.3, 0.4, 0.3, 0.25, 0.2]
  embed_slerp: true
dtype: bfloat16

Casual-Autopsy/L3-Umbral-Mind-RP-v3.0-8B

models:
  - model: Casual-Autopsy/Umbral-Mind-6
  - model: aifeifei798/llama3-8B-DarkIdol-2.1-Uncensored-32K
    parameters:
      weight: [0.02, -0.01, -0.01, 0.02]
  - model: ResplendentAI/Nymph_8B
    parameters:
      weight: [-0.01, 0.02, 0.02, -0.01]
  - model: ChaoticNeutrals/Poppy_Porpoise-1.0-L3-8B
    parameters:
      weight: [-0.01, 0.02, 0.02, -0.01]
  - model: Nitral-AI/Hathor_Tahsin-L3-8B-v0.85
    parameters:
      weight: [0.02, -0.01, -0.01, 0.02]
merge_method: task_arithmetic
base_model: Casual-Autopsy/Umbral-Mind-6
parameters:
  normalize: false
dtype: bfloat16

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры: LlamaForCausalLM
Ревизия весов: f7d4cbc