/ Модель

Характеристики

Контекст
8 192 токена
Параметры
7,5 млрд
Размер весов
16,1 ГБ
Лицензия
Своя лицензия
Архитектура
llama · dense
Базовая модель
llama-3-8B-instruct-Bluemoon-Freedom-RP
Библиотека
transformers
Опубликована
23 апр 2024

Llama-3-SnowyRP-8B-V1

Генерация текстаТекст → текст

Объединённая англоязычная модель Llama 3 на 7,5 млрд параметров для генерации текста и ролевых диалогов.

19скачиваний за 30 дней7лайковвеса обновлены24 апр 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Masterjp123/Llama-3-SnowyRP-8B-V1 — англоязычная чат-модель для генерации текста и ролевых диалогов, созданная объединением нескольких дообученных моделей Llama 3. В README автор описывает её как первую неквантизованную версию SnowyRP и сообщает, что качество ещё почти не проверялось. Модель имеет плотную архитектуру LlamaForCausalLM и 7,5 млрд параметров; контекст — до 8192 токенов. Она ориентирована на разговорное использование и ролевые сценарии, а также заявлена автором как модель без ограничений на контент.

При объединении использован метод Model Stock, базой служила kuotient/Meta-Llama-3-8B-Instruct. В состав также вошли модели для ролевых диалогов и общения, включая Bluemoon Freedom RP, Dragonmaid, Neural Chat, Unholy и Soliloquy. Репозиторий содержит веса safetensors и предназначен для использования через Transformers. Лицензия указана как other; README сообщает о применимости лицензии Llama 3 и дополнительных условиях, ограничивающих коммерческое использование, поэтому перед коммерческим применением следует проверить условия всех исходных лицензий.

Сценарии применения

  • ведение ролевых диалогов на английском языке
  • генерация реплик персонажей для текстовых ролевых игр
  • создание разговорных историй и сцен
  • ответы в формате инструкционного чат-бота

Ограничения

Автор сообщает, что качество модели почти не проверялось. Условия лицензирования исходных моделей могут ограничивать коммерческое использование; необходимо сверить применимые лицензии.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

merged

This is the unquantized first version of SnowyRP's Llama 3 model. Quality of this model is unknown, since it is a Llama 3 model that I have not had the chance to test much. Also Once the EXL2 Quant is done I'll test this model and if it's quality is upto my standards, I'll create an GGUF Quant.

EXL2

Merge Details

For this model I used the most uncensored and smartest finetunes of LLama 3, since LLama 3 has the largest ammount of training tokens I know of, so I expect it to have more than enough of a knowledge base.

This model is under both the LLama 3 licince and a few other ones that only affect conmerical uses, But I am not a lawer so use in commerical settings at your own risk.

Model Use:

Here is an modified Alpaca prompt I use with this model:

Below is an instruction that describes a task. Write a response that appropriately completes the request.

### Instruction: Take the role of {{char}} in a play that leaves a lasting impression on {{user}}.  Write {{char}}'s next reply. Never skip or gloss over {{char}}’s actions. Progress the scene at a naturally slow pace. Avoid repetition, don't loop. Develop the plot slowly, always stay in character. Describe all actions in full, elaborate, explicit, graphic, and vivid detail. Mention all relevant sensory perceptions.

Merge Method

This model was merged using the Model Stock merge method using kuotient/Meta-Llama-3-8B-Instruct as a base.

Models Merged

The following models were included in the merge:

Configuration

The following YAML configuration was used to produce this model:

base_model: kuotient/Meta-Llama-3-8B-Instruct
dtype: bfloat16
merge_method: model_stock
slices:
- sources:
  - layer_range: [0, 32]
    model: Undi95/Llama-3-Unholy-8B-e4
  - layer_range: [0, 32]
    model: nbeerbower/llama-3-dragonmaid-8B
  - layer_range: [0, 32]
    model: openlynn/Llama-3-Soliloquy-8B
  - layer_range: [0, 32]
    model: Locutusque/llama-3-neural-chat-v1-8b
  - layer_range: [0, 32]
    model: Dogge/llama-3-8B-instruct-Bluemoon-Freedom-RP
  - layer_range: [0, 32]
    model: kuotient/Meta-Llama-3-8B-Instruct

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
07515dd

0 моделей