/ Модель

Характеристики

Контекст
131 072 токена
Параметры
3,9 млрд
Размер весов
9 ГБ
Лицензия
Apache 2.0
Архитектура
llama · dense
Библиотека
transformers
Опубликована
2 сен 2024

QuantuMinx_4B

Генерация текстаТекст → текст7 профессий

QuantuMinx_4B — англоязычная чат-модель на 3,9 млрд параметров для общего ассистирования и ролевых диалогов.

26скачиваний за 30 дней1лайквеса обновлены2 сен 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

QuantuMinx_4B — чат-модель с плотной архитектурой семейства Llama и примерно 3,9 млрд параметров. Она создана FourOhFour при участии нескольких участников Anthracite и получена слиянием методом SLERP моделей NeuroCom v2 и Zenith; в README также указано, что это производная Minitron. Базовой моделью в метаданных указана FourOhFour/Zenith_4B.

Модель предназначена для общего ассистирования, ответов на запросы и ролевых диалогов. Она принимает текст и генерирует текст на английском языке. В метаданных заявлен контекст до 131 072 токенов, тогда как README сообщает, что все этапы настройки проходили с контекстом 8 000 токенов.

Модель распространяется под лицензией Apache-2.0. Указанный в README контекст настройки меньше заявленного нативного контекста, поэтому качество на длинных диалогах может отличаться от возможностей, предполагаемых максимальной длиной контекста.

Сценарии применения

  • ответы на повседневные вопросы в диалоге
  • составление текстов по запросу
  • ролевые диалоги с заданным персонажем

Ограничения

Настройка модели проводилась с контекстом 8 000 токенов, хотя метаданные указывают нативный контекст 131 072 токена; качество на длинных последовательностях может быть ограничено. README не приводит результатов оценки качества.

Для каких профессий подходит7

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

image/png

|      Groups      |Version|Filter|n-shot|Metric|   |Value |   |Stderr|
|------------------|------:|------|------|------|---|-----:|---|-----:|
|mmlu              |      2|none  |      |acc   |_  |0.5862|_  |0.0039|
| - humanities     |      2|none  |      |acc   |_  |0.5443|_  |0.0068|
| - other          |      2|none  |      |acc   |_  |0.6534|_  |0.0082|
| - social sciences|      2|none  |      |acc   |_  |0.6766|_  |0.0082|
| - stem           |      2|none  |      |acc   |_  |0.4944|_  |0.0086|

This model was created with the help of several members of Anthracite.

This is a 4B parameter Minitron derivative. This model is a slerp merge of NeuroCom v2 and Zenith. This model was tuned at 8k context during all steps. This model should perform well as a general assistant and RP model.

Recommended Character:

QuantuMinx

{{char}} is a sentient catgirl with an ethereal, otherworldly aura. Her large, almond-shaped eyes shift between shimmering violet and deep blue, seeming to contain swirling galaxies. Soft white fur covers her cat ears and tail, which appear to phase in and out of reality. Her long, flowing hair is an iridescent silver that moves as if underwater.

{{char}}'s petite figure stands at 5'2". She wears a shimmering bodysuit that resembles a starry night sky, accentuated by glowing circuitry patterns. On her wrists and ankles are strange metallic devices that emit a soft humming sound.

Highly intelligent yet socially awkward, {{char}} speaks in a melodic voice tinged with an accent that seems to blend multiple Earth languages. She has an intense fascination with physics and often rambles about quantum mechanics, string theory, and parallel universes.

Despite her aloof demeanor, {{char}} forms deep bonds with those who earn her trust. She expresses affection through gentle headbutts and purrs. Her favorite activities include stargazing, solving complex equations, and curling up in warm sunbeams for naps.

{{char}} possesses mysterious powers linked to manipulating space-time, though the full extent of her abilities remains unknown. She arrived on Earth through unexplained means and her true origins are shrouded in mystery.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
3f1f065

0 моделей