Характеристики

Контекст: 32 768 токенов
Параметры: 7,1 млрд
Лицензия: CC BY-NC 4.0
Архитектура: mixtral · MoE
Опубликована: 12 янв 2024

Ссылки

Hugging Face

CATA-8x7B

Envoid

Генерация текстаТекст → текст3 профессии

Диалоговая модель Mixtral, полученная слиянием трёх моделей для ролевых игр и творческого письма.

21скачиваний за 30 дней0лайковвеса обновлены12 янв 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

Добавьте модель в бенчмарк
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Опишите свои задачи
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Запустите и опубликуйте
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Открыть конструктор бенчмарка

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

CATA (Cerebrovascular Anthology, Task Arithmetic) — диалоговая модель, созданная Envoid слиянием методом task arithmetic трёх моделей: Dendrite-8x7B, Augmentasanguis-8x7B и Augmentasanguis-PDE-8x7B. В качестве базовой модели использована Mistral-8x7B-Instruct-v0.1; архитектура — Mixtral MoE. Веса опубликованы в формате safetensors, размер модели по метаданным — 7,1 млрд параметров, длина контекста — 32 768 токенов.

Модель предназначена для диалогов, ролевых игр и творческого письма. Автор отмечает, что она может создавать контент для взрослых и иногда выдавать непредсказуемые ответы. Лицензия CC BY-NC 4.0 разрешает использование с указанием авторства, но запрещает коммерческое использование.

Сценарии применения

ролевые диалоги с персонажами
написание художественных сцен и рассказов
совместное творческое письмо
диалоги с возможным контентом для взрослых

Ограничения

Модель может выдавать контент для взрослых и иногда отвечает непредсказуемо. Лицензия CC BY-NC 4.0 не допускает коммерческого использования.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

I.5Универсальные способностиСоздание и редактирование текстаAI помогает создавать и улучшать текстовые материалы, сохраняя смысл и требования автора.18 задач44 385моделей IV.9Отраслевые задачиМедиа, журналистика, культура, архивы и игрыAI помогает создавать, искать, сохранять и персонализировать медиа, культурный и игровой контент.44 задачи14 938моделей I.7Универсальные способностиРечь, диалоги и встречиAI помогает понимать разговорную речь, поддерживать диалог и превращать встречи в структурированные результаты.17 задач26 923модели

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Caution:

This model may output adult content and can sometimes be a little bit unpredictable.

CATA

or Cerebrovascular Anthology (Task Arithmetic) utilizes Charles Goddard's mergekit

Using the Task Arithmetic method I combined

Dendrite-8x7B

Augmentasanguis-8x7B

Augmentasanguis-PDE-8x7B

I utilized the following config:

base_model: ./mistralai_Mixtral-8x7B-Instruct-v0.1
models:
  - model: ./Augmentasanguis-8x7B
    parameters:
      weight: 0.4
  - model: ./Augmentasanguis-PDE-8x7B
    parameters:
      weight: 0.3
  - model: ./Dendrite-8x7Bv1
    parameters:
      weight: 0.3
merge_method: task_arithmetic
dtype: float16

The model has inherited the strengths of all 3 models without any of the drawbacks. Making it an excellent choice for role play and creative writing.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

vLLM

Можно запустить

Подбираем GPU…

Класс архитектуры: MixtralForCausalLM
Ревизия весов: af70cb6