Характеристики

Контекст: 4 096 токенов
Параметры: 19,8 млрд
Лицензия: CC BY-NC 4.0
Архитектура: llama · dense
Опубликована: 27 ноя 2023

Ссылки

Hugging Face

CleverGirl-20b-Blended

athirdpath

Генерация текстаТекст → текст3 профессии

Экспериментальная 19,8-миллиардная Llama-модель для генерации текста, полученная слиянием двух вариантов CleverGirl.

58скачиваний за 30 дней0лайковвеса обновлены28 ноя 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

Добавьте модель в бенчмарк
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Опишите свои задачи
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Запустите и опубликуйте
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Открыть конструктор бенчмарка

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

CleverGirl-20b-Blended — экспериментальная текстовая модель генерации, созданная athirdpath слиянием CleverGirl-20b и CleverGirl-20b-Inverted методом SLERP. Автор описывает её как эксперимент со смешиванием моделей и отмечает, что ответы могут быть необычными; субъективно модель показалась автору умнее и креативнее исходной версии. В основе линейки CleverGirl лежат Sao10K/Mythical-Destroyer-V2-L2-13B и athirdpath/Orca-2-13b-Alpaca-Uncensored.

Модель построена на плотной архитектуре LlamaForCausalLM и содержит 19,8 млрд параметров. Она принимает текст и генерирует текст, поддерживает контекст до 4096 токенов. Веса опубликованы в формате safetensors; лицензия CC BY-NC 4.0 разрешает использование с ограничением на некоммерческое применение.

Сценарии применения

генерация творческих текстовых ответов
эксперименты со слиянием языковых моделей
сравнение качества blended- и исходных моделей

Ограничения

Автор предупреждает, что модель может выдавать странные ответы. Лицензия CC BY-NC 4.0 ограничивает использование некоммерческими целями.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

I.5Универсальные способностиСоздание и редактирование текстаAI помогает создавать и улучшать текстовые материалы, сохраняя смысл и требования автора.18 задач44 385моделей II.6Разработка и данныеДокументация и сопровождение разработкиAI помогает поддерживать понятную техническую документацию и ускорять передачу знаний.18 задач38 015моделей I.2Универсальные способностиСинтез, понимание и проверка знанийAI помогает сжимать, сопоставлять и критически проверять знания без потери существенного контекста.18 задач42 341модель

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

This model is CleverGirl and CleverGirl-Inverted blended together, an experiment on the nature of frankenstein merges. The CleverGirl line is made from Sao10K/Mythical-Destroyer-V2-L2-13B and athirdpath/Orca-2-13b-Alpaca-Uncensored.

She can be a little strange, but lives up to her name: image/png Looking forward to comparing the leaderboard scores between this and the unblended version, subjectively this model feels both smarter and more creative after my "frankenstein slice normalization".

models:

model: athirdpath/CleverGirl-20b
model: athirdpath/CleverGirl-20b-Inverted

merge_method: slerp

base_model: athirdpath/CleverGirl-20b

parameters: t: value: 0.5

dtype: float16

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры: LlamaForCausalLM
Ревизия весов: 8bb2aca