/ Модель

Характеристики

Контекст
32 768 токенов
Параметры
7,1 млрд
Лицензия
CC BY-SA 4.0
Архитектура
mistral · dense
Базовая модель
Multiverse-Experiment-slerp-7b
Библиотека
transformers
Опубликована
10 мар 2024

Paradigm_7B

Генерация текстаТекст → текст3 профессии

Англоязычная 7,1-миллиардная модель Mistral, слитая из нескольких моделей для ролевого общения и генерации текста.

58скачиваний за 30 дней3лайкавеса обновлены10 мар 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Paradigm 7B — англоязычная модель для генерации текста и ролевого общения, опубликованная ResplendentAI. Это плотная причинно-авторегрессионная модель семейства Mistral с 7,1 млрд параметров и контекстом до 32 768 токенов. Модель создана слиянием нескольких моделей методом DARE-TIES; среди исходных моделей указаны ChaoticNeutrals/Eris_Remix_7B, ResplendentAI/Datura_7B, liminerity/Multiverse-Experiment-slerp-7b и jeiku/Alpaca_NSFW_Shuffled_Mistral.

Модель предназначена прежде всего для ролевых диалогов и генерации ответов. В карточке приведены результаты Open LLM Leaderboard, включая средний балл 75,47, ARC 73,63 и HellaSwag 88,66. Доступны веса в формате safetensors; README также упоминает отдельную сборку GGUF. Лицензия — CC-BY-SA-4.0.

Данные обучения и назначение модели указывают на возможность генерации токсичного и откровенного контента. Английский язык отмечен в карточке; подтверждений поддержки других языков нет.

Сценарии применения

  • ведение ролевого диалога с персонажем
  • генерация реплик и продолжений сцен
  • создание ответов в стиле ролевой игры

Ограничения

Карточка ориентирует модель на ролевое общение, поэтому её пригодность для иных задач отдельно не подтверждена. Обучающие данные включают наборы с откровенным и токсичным контентом.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Paradigm

image/jpeg

An incredibly effective and intelligent RP model designed to be the best bot you've ever used. I hope you like it!

GGUF available here: https://huggingface.co/Lewdiculous/Paradigm_7B-GGUF-IQ-Imatrix

Open LLM Leaderboard Evaluation Results

Detailed results can be found here

MetricValue
Avg.75.47
AI2 Reasoning Challenge (25-Shot)73.63
HellaSwag (10-Shot)88.66
MMLU (5-Shot)64.02
TruthfulQA (0-shot)75.19
Winogrande (5-shot)84.53
GSM8k (5-shot)66.79

Configuration

The following YAML configuration was used to produce this model:

merge_method: dare_ties
base_model: ChaoticNeutrals/Eris_Remix_7B
parameters:
  normalize: true
models:
  - model: ChaoticNeutrals/Eris_Remix_7B
    parameters:
      weight: 1
  - model: ResplendentAI/Datura_7B
    parameters:
      weight: 1
  - model: liminerity/Multiverse-Experiment-slerp-7b+jeiku/Alpaca_NSFW_Shuffled_Mistral
    parameters:
      weight: 0.33
dtype: float16

Open LLM Leaderboard Evaluation Results

Detailed results can be found here

MetricValue
Avg.75.47
AI2 Reasoning Challenge (25-Shot)73.63
HellaSwag (10-Shot)88.66
MMLU (5-Shot)64.02
TruthfulQA (0-shot)75.19
Winogrande (5-shot)84.53
GSM8k (5-shot)66.79

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры
MistralForCausalLM
Ревизия весов
8b1a784

0 моделей