/ Модель

Характеристики

Контекст
32 768 токенов
Параметры
7,1 млрд
Размер весов
93,4 ГБ
Лицензия
AGPL 3.0
Архитектура
mixtral · MoE
Опубликована
21 янв 2024

Crunchy-onion

Генерация текстаТекст → текст3 профессии

Дообученная разговорная модель Mixtral для генерации диалогов, ролевых сценариев и ответов с учётом теории разума.

75скачиваний за 30 дней9лайковвеса обновлены25 янв 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Crunchy-onion — разговорная языковая модель, созданная Epiculous дообучением модели семейства Mixtral на примерах из LimaRP в формате ShareGPT, а также на данных по теории разума и наборе Gnosis. Она предназначена для генерации текста в диалоге, в том числе для ролевых сценариев и ответов, учитывающих намерения и психическое состояние собеседников. Модель имеет архитектуру Mixtral MoE, содержит 7,1 млрд параметров и поддерживает контекст до 32 768 токенов. Репозиторий содержит веса в формате Safetensors. Модель распространяется по лицензии AGPL-3.0.

Сценарии применения

  • ведение диалогов с моделью
  • генерация реплик для ролевых сценариев
  • создание персонажей для интерактивных историй
  • моделирование понимания намерений собеседника

Ограничения

Карточка не приводит результатов оценки качества или подробностей рекомендуемых настроек генерации; поведение модели зависит от обучающих данных и может включать их ошибки и смещения.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Crunchy-onion

This model is created by training Mixtral base model on LimaRP (ShareGPT format provided by SAO), theory of mind, and gnosis(provided by jeiku).

The 4-bit qlora was then merged into Mixtral Instruct resulting in what you see here.

Works best with Alpaca Instruct

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

vLLM

Можно запустить

Подбираем GPU…

Класс архитектуры
MixtralForCausalLM
Ревизия весов
a86df4c

0 моделей