Характеристики

Контекст: 8 192 токена
Параметры: 27,6 млрд
Размер весов: 56,8 ГБ
Архитектура: gemma2 · dense
Базовая модель: Gemmasutra-Pro-27B-v1
Библиотека: transformers
Опубликована: 8 авг 2024

Ссылки

gemma-optiRP-v1

Генерация текстаТекст → текст

Разговорная Gemma 2 с 27,6 млрд параметров, полученная слиянием двух моделей и предназначенная для диалога и генерации текста.

18скачиваний за 30 дней0лайковвеса обновлены8 авг 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

Добавьте модель в бенчмарк
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Опишите свои задачи
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Запустите и опубликуйте
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Открыть конструктор бенчмарка

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Arcadianer/gemma-optiRP-v1 — разговорная модель генерации текста на основе Gemma 2 с 27,6 млрд параметров. Она создана слиянием методом SLERP моделей TheDrummer/Big-Tiger-Gemma-27B-v1 и TheDrummer/Gemmasutra-Pro-27B-v1 с помощью mergekit; в конфигурации указана точность bfloat16.

Модель предназначена для диалогов и генерации текста. Заявленная длина контекста составляет 8192 токена. Карточка не описывает поддерживаемые естественные языки и специализированные области применения. Репозиторий содержит веса в формате safetensors; лицензия в предоставленных данных не указана.

Сценарии применения

ведение диалога с пользователем
генерация ответов на текстовые запросы
создание связного текста
развлекательные ролевые диалоги

Ограничения

Длина контекста ограничена 8192 токенами. В предоставленных данных нет сведений о лицензии и поддерживаемых языках.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

merge

This is a merge of pre-trained language models created using mergekit.

Merge Details

Merge Method

This model was merged using the SLERP merge method.

Models Merged

The following models were included in the merge:

Configuration

The following YAML configuration was used to produce this model:

models:
  - model: TheDrummer/Big-Tiger-Gemma-27B-v1
  - model: TheDrummer/Gemmasutra-Pro-27B-v1
merge_method: slerp
base_model: TheDrummer/Big-Tiger-Gemma-27B-v1
dtype: bfloat16
parameters:
  t: [0.6, 0.6,0.6, 0.6, 0.6] # V shaped curve: Hermes for input & output, WizardMath in the middle layers

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры: Gemma2ForCausalLM
Ревизия весов: a8213f5