/ Модель

Характеристики

Контекст
131 072 токена
Параметры
122 млрд
Размер весов
245 ГБ
Лицензия
Своя лицензия
Архитектура
mistral · dense
Опубликована
23 ноя 2024

Behemoth-123B-v2.1

Генерация текстаТекст → текст6 профессий

Дообученная на базе Largestral 2411 диалоговая модель на 122,2 млрд параметров для генерации текста и творческих задач.

91скачиваний за 30 дней19лайковвеса обновлены24 ноя 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Behemoth-123B-v2.1 — дообученная языковая модель BeaverAI, основанная на Largestral 2411. Это плотная авторегрессионная модель семейства Mistral с 122,2 млрд параметров и контекстом до 131 072 токенов; она предназначена для диалоговой генерации текста и поддерживает системные инструкции. Автор README отмечает творческую направленность версии 2.1 и рекомендует формат Metharme с системными токенами Mistral.

Модель подходит для свободного диалога, творческого письма и задач, где нужны длинный контекст и настройка поведения через системное сообщение. В репозитории указаны веса safetensors; README также ссылается на варианты GGUF и iMatrix. Метаданные обозначают лицензию как other, поэтому перед использованием следует проверить условия лицензии в карточке модели.

Сценарии применения

  • творческое письмо и генерация историй
  • свободный диалог с системными инструкциями
  • создание длинных текстов с большим контекстом

Ограничения

В README нет результатов сравнительных оценок качества; замечания об улучшениях основаны на отзывах тестировщиков. Условия лицензии обозначены как other и требуют проверки перед использованием.

Для каких профессий подходит6

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Join our Discord! https://discord.gg/Nbv9pQ88Xb

Nearly 2500 members strong 💪

Now with more channels! A hub for creatives and makers alike!


BeaverAI proudly presents...

Behemoth 123B v2.1 🦣

Nothing in the void is foreign to us. The place we go is the place we belong.

image/png

Links

Description

Behemoth v2.x is a finetune of the new Largestral 2411 with system prompt support. Testers have noted that everything felt improved.

Usage

Testers say this frankenformat maximizes the model's potential: Metharme with Mistral's new system tokens

  • [SYSTEM_PROMPT] <|system|>{{system_message}}[/SYSTEM_PROMPT]<|user|>{{user_message}}<|model|>{{assistant_message}}
  • <|system|>[SYSTEM_PROMPT] {{system_message}}[/SYSTEM_PROMPT]<|user|>{{user_message}}<|model|>{{assistant_message}}

Take note that the opening system tag SHOULD ALWAYS have a leading whitespace after it.

Complete SillyTavern Settings in BeaverAI Club: https://discord.com/channels/1238219753324281886/1309968730301792370/1309968730301792370

Versions

  • v2.0 is equivalent to Behemoth v1.0 (Classic)
  • v2.1 is equivalent to Behemoth v1.1 (Creative Boost)
  • v2.2 is an improvement of Behemoth v2.1 (Creative++)

Special Thanks

Thank you to each and everyone who donated/subscribed in Ko-Fi 🙇 I hope to never disappoint!

Toasty Pigeon
theguywhogamesalot
Grozi
F
Marinara
Ko-fi Supporter
Grozi
Phaelon
ONTHEREDTEAM 
EvarinSharath'fe(USM-Valor)
Silva
Dakkidaze
AlexTheVP
Pseudo
Kistara
Dr. Fjut
Grozi 🥈
KinjiHakari777
dustywintr
Syd
HumbleConsumer
Syd
Ko-fi Supporter
Arkamist
joe 🥇
Toad
Lied
Konnect
Kistara
Grozi 🥉
SleepDeprived3
Luigi
Nestor

https://ko-fi.com/thedrummer/leaderboard

Finetuned by yours truly,
Drummer

image/png

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

vLLM

Можно запустить

Подбираем GPU…

Класс архитектуры
MistralForCausalLM
Ревизия весов
ad178fa

0 моделей