/ Модель

Характеристики

Контекст
8 192 токена
Параметры
7,5 млрд
Размер весов
16,1 ГБ
Лицензия
CC BY-NC 4.0
Архитектура
llama · dense
Библиотека
transformers
Опубликована
17 мая 2024

Pantheon-Hermes-rp

Генерация текстаТекст → текст3 профессии

Объединённая модель Llama 3 для ролевых диалогов и генерации текста в формате ChatML.

20скачиваний за 30 дней1лайквеса обновлены18 мая 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Pantheon-Hermes-rp — созданная автором ohyeah1 объединённая диалоговая языковая модель на базе Llama 3, предназначенная прежде всего для ролевых диалогов и генерации текста. Модель объединяет Pantheon-RP-1.0-8b-Llama-3 и Hermes-2-Pro-Llama-3-8B методом dare_ties; в конфигурации базовой моделью указана Undi95/Meta-Llama-3-8B-hf. Архитектура — плотная LlamaForCausalLM, размер — 7,5 млрд параметров.

Модель принимает текст в формате ChatML и генерирует текст; заявленная длина контекста составляет 8192 токена. README характеризует её как сильную в ролевой игре и отмечает склонность к раскованным ответам. Репозиторий использует формат safetensors и библиотеку Transformers. Лицензия CC BY-NC 4.0 допускает использование с указанием авторства, но запрещает коммерческое применение.

Сценарии применения

  • ведение ролевых диалогов с вымышленными персонажами
  • генерация ответов персонажа в текстовой игре
  • создание раскованных диалогов и сцен
  • продолжение пользовательских сценариев в формате ChatML

Ограничения

Автор предупреждает, что модель может выдавать крайне раскованные ответы. Лицензия CC BY-NC 4.0 не допускает коммерческого использования.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Pantheon-Hermes-rp

This is a merge of pre-trained language models created using mergekit.

PROMPT FORMAT: ChatML

Very good RP model. Can be very unhinged. It is also surprisingly smart.

Tested with these sampling settings: Temperature: 1.4 min p: 0.1

Configuration

The following YAML configuration was used to produce this model:

models:
  - model: Gryphe/Pantheon-RP-1.0-8b-Llama-3
    parameters:
      weight: 0.7
      density: 0.4
  - model: NousResearch/Hermes-2-Pro-Llama-3-8B
    parameters:
      weight: 0.4
      density: 0.4
merge_method: dare_ties
base_model: Undi95/Meta-Llama-3-8B-hf
parameters:
  normalize: false
  int8_mask: true
dtype: bfloat16

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
d3d3866

0 моделей