Характеристики

Контекст: 131 072 токена
Параметры: 71,5 млрд
Размер весов: 145 ГБ
Лицензия: Своя лицензия
Архитектура: qwen2 · dense
Базовая модель: Tess-v2.5.2-Qwen2-72B
Библиотека: transformers
Опубликована: 15 июн 2024

Ссылки

Hugging Face arXiv 2306.01708

Unhinged-Qwen2-72B

FiditeNemini

Генерация текстаТекст → текст5 профессий

Объединённая на базе Qwen2 72B разговорная модель для генерации текста и диалогов на английском языке.

22скачиваний за 30 дней1лайквеса обновлены27 июн 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

Добавьте модель в бенчмарк
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Опишите свои задачи
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Запустите и опубликуйте
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Открыть конструктор бенчмарка

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Unhinged-Qwen2-72B — объединённая разговорная языковая модель, созданная с помощью mergekit на основе Qwen2 и моделей Tess-v2.5.2-Qwen2-72B и Dolphin-2.9.2-Qwen2-72B. В метаданных указаны архитектура Qwen2ForCausalLM, плотная архитектура и 71,5 млрд параметров; модель распространяется в формате safetensors и поддерживает контекст до 131 072 токенов.

Модель предназначена для генерации текста и диалоговых сценариев на английском языке. Лицензия обозначена как other, поэтому условия использования следует проверять в репозитории модели. Данных о специализированных областях применения в карточке нет.

Сценарии применения

ведение диалога на английском языке
генерация ответов на запросы пользователя
создание связного текста на английском языке

Ограничения

Карточка не приводит результатов оценки качества или подробных сведений о надёжности ответов. Лицензия указана как other; перед использованием проверьте условия в репозитории.

Для каких профессий подходит5

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

I.5Универсальные способностиСоздание и редактирование текстаAI помогает создавать и улучшать текстовые материалы, сохраняя смысл и требования автора.18 задач44 385моделей III.4Корпоративные функцииКлиентская поддержка и customer successAI помогает быстрее решать обращения и предупреждать проблемы клиентов.20 задач9 831модель I.7Универсальные способностиРечь, диалоги и встречиAI помогает понимать разговорную речь, поддерживать диалог и превращать встречи в структурированные результаты.17 задач26 923модели I.2Универсальные способностиСинтез, понимание и проверка знанийAI помогает сжимать, сопоставлять и критически проверять знания без потери существенного контекста.18 задач42 341модель

Также подходит для

III.2Исследование рынка и маркетинг

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Unhinged-Qwen2-70B

This is a merge of pre-trained language models created using mergekit.

Thanks to mradermacher for providing the quants for this model.

Merge Details

Merge Method

This model was merged using the TIES merge method using migtissera/Tess-v2.5.2-Qwen2-72B as a base.

Models Merged

The following models were included in the merge:

cognitivecomputations/dolphin-2.9.2-qwen2-72b
migtissera/Tess-v2.5.2-Qwen2-72B

Configuration

The following YAML configuration was used to produce this model:

base_model: migtissera/Tess-v2.5.2-Qwen2-72B
dtype: bfloat16
merge_method: ties
parameters:
  int8_mask: 1.0
  normalize: 0.0
slices:
- sources:
  - layer_range: [0, 80]
    model: cognitivecomputations/dolphin-2.9.2-qwen2-72b
    parameters:
      density: 0.5
      weight: 0.5
  - layer_range: [0, 80]
    model: migtissera/Tess-v2.5.2-Qwen2-72B
    parameters:
      density: 0.5
      weight: 0.5

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

vLLM

Можно запустить

Подбираем GPU…

Класс архитектуры: Qwen2ForCausalLM
Ревизия весов: 8f97352