/ Модель

Характеристики

Контекст
32 768 токенов
Параметры
32 млрд
Размер весов
65,5 ГБ
Архитектура
qwen2 · dense
Базовая модель
Rombos-Coder-V2.5-Qwen-32b
Библиотека
transformers
Опубликована
2 дек 2024

QwQ-32B-Coder-Fusion-9010-1x-TIES-v1.2

Генерация текстаТекст → текст

Объединённая методом TIES 32-миллиардная модель семейства Qwen2 для диалоговой генерации текста и помощи с кодом.

12скачиваний за 30 дней0лайковвеса обновлены2 дек 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

BenevolenceMessiah/QwQ-32B-Coder-Fusion-9010-1x-TIES-v1.2 — объединённая модель на основе языковых моделей, созданная разработчиком с помощью mergekit методом TIES. В объединение вошли huihui-ai/QwQ-32B-Coder-Fusion-9010 и rombodawg/Rombos-Coder-V2.5-Qwen-32b; конфигурация указывает тип данных bfloat16 и объединённый токенизатор. Модель относится к семейству Qwen2, имеет плотную архитектуру Qwen2ForCausalLM и 32 млрд параметров.

Модель предназначена для диалоговой генерации текста и помощи с программированием, включая ответы на запросы и генерацию кода. Метаданные указывают контекст длиной 32 768 токенов, интерфейс чата и интерфейс вызова инструментов. Основной язык карточкой не установлен.

В репозитории используются веса Safetensors. Лицензия в предоставленных данных не указана.

Сценарии применения

  • генерация и дополнение программного кода
  • ответы на вопросы по программированию
  • диалоговое решение задач на рассуждение
  • генерация текста в интерфейсе чата
  • вызов инструментов через поддерживаемый интерфейс

Ограничения

В предоставленных данных не указаны результаты сравнительных оценок или подробные ограничения качества. Лицензия не указана.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

merge

This is a merge of pre-trained language models created using mergekit.

Merge Details

Merge Method

This model was merged using the TIES merge method using huihui-ai/QwQ-32B-Coder-Fusion-9010 as a base.

Models Merged

The following models were included in the merge:

Configuration

The following YAML configuration was used to produce this model:

# QwQ-32B-Coder-Fusion-9010-1x-TIES-v1.2

models:
  - model: rombodawg/Rombos-Coder-V2.5-Qwen-32b # Self-instruct fine-tuning on Qwen2.5-Coder
    parameters:
      density: 0.333
      weight: 0.333

merge_method: ties
base_model: huihui-ai/QwQ-32B-Coder-Fusion-9010 # Advanced AI reasoning capabilities, ratio weighted 9 (QwQ):1 (Qwen2.5-Coder) both abliterated models
parameters:
  normalize: true
  int8_mask: false
dtype: bfloat16
tokenizer_source: union

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры
Qwen2ForCausalLM
Ревизия весов
fb5c48e

0 моделей