/ Модель

Характеристики

Контекст
32 768 токенов
Параметры
123 млрд
Лицензия
Llama 2
Архитектура
llama · dense
Опубликована
29 янв 2024

WinterGoliath-123b-32k

Генерация текстаТекст → текст9 профессий

Слитая 123,5-миллиардная модель Llama с контекстом 32 768 токенов для генерации текста и диалогов.

39скачиваний за 30 дней0лайковвеса обновлены30 янв 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

WinterGoliath-123b-32k — слитая модель авторегрессионной генерации текста на архитектуре Llama, опубликованная ChuckMcSneed. Она объединяет Xwin и WinterGoddess, расширенные до контекста 32 768 токенов; для запросов README предлагает формат Vicuna или Alpaca. Модель предназначена для генерации текста и диалогов. В README автор отмечает, что модель умнее Goliath-32k, но имеет особенности и несколько повреждена по сравнению с исходной WinterGoliath; приведённый тест назван автором шуточным, поэтому его результаты не дают надёжной оценки качества. Репозиторий содержит веса Safetensors, размер модели — 123,5 млрд параметров. Лицензия — Llama 2.

Сценарии применения

  • генерация текста по запросу
  • диалоговое общение в формате Vicuna
  • ответы на инструкции в формате Alpaca
  • работа с длинными текстовыми контекстами

Ограничения

Автор отмечает наличие особенностей и ухудшение относительно исходной WinterGoliath. Языковая поддержка отдельно не описана, а приведённый шуточный бенчмарк не подтверждает качество модели.

Для каких профессий подходит9

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

This is a merge of Xwin and WinterGoddess, both extended to 32k using the method discussed here.

Smarter than Goliath-32k, but has some quirks.

A bit damaged compared to original WinterGoliath.

Prompt format

Vicuna or Alpaca.

Benchmarks

NeoEvalPlusN_benchmark

My meme benchmark.

Test nameWinterGoliath-32kWinterGoliath
B33
C22
D12
S3.755.5
P3.756
Total13.518.5

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

vLLM

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
8be16fc

0 моделей