Характеристики

Контекст: 4 096 токенов
Параметры: 12,9 млрд
Лицензия: Llama 2
Архитектура: llama · dense
Опубликована: 29 янв 2024

Ссылки

Hugging Face

vicuna-13b-v1.5-16k_ELYZA-japanese-Llama-2-13b-instruct

noguchis

Генерация текстаТекст → текст

Объединённая SLERP-модель на базе ELYZA Japanese Llama 2 и Vicuna для генерации текста и диалоговых ответов.

112скачиваний за 30 дней1лайквеса обновлены29 янв 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

Добавьте модель в бенчмарк
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Опишите свои задачи
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Запустите и опубликуйте
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Открыть конструктор бенчмарка

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

noguchis/vicuna-13b-v1.5-16k_ELYZA-japanese-Llama-2-13b-instruct — объединённая языковая модель на архитектуре Llama 2, созданная методом SLERP с помощью mergekit из ELYZA-japanese-Llama-2-13b-instruct и Vicuna-13b-v1.5-16k. Веса сохранены в формате safetensors; размер модели — 12,9 млрд параметров. Модель предназначена для генерации текста и диалоговых ответов, сочетая японскую инструктивную модель ELYZA с Vicuna.

В метаданных указан контекст 4096 токенов. Карточка модели не сообщает результатов оценки качества или подробных ограничений применимости. Для использования действует лицензия Llama 2.

Сценарии применения

генерация ответов в диалоге на японском языке
выполнение текстовых инструкций на японском языке
генерация текста на английском языке
создание прототипа чат-бота на базе Vicuna и ELYZA

Ограничения

Качество и ограничения модели не описаны в карточке; указан контекст 4096 токенов. Лицензия Llama 2 распространяется на использование модели.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

base_model:

elyza/ELYZA-japanese-Llama-2-13b-instruct
lmsys/vicuna-13b-v1.5-16k tags:
mergekit
merge

outputs

This is a merge of pre-trained language models created using mergekit.

Merge Details

Merge Method

This model was merged using the SLERP merge method.

Models Merged

The following models were included in the merge:

Configuration

The following YAML configuration was used to produce this model:

slices:
  - sources:
      - model: elyza/ELYZA-japanese-Llama-2-13b-instruct
        layer_range: [0, 40]
      - model: lmsys/vicuna-13b-v1.5-16k
        layer_range: [0, 40]
merge_method: slerp
base_model: lmsys/vicuna-13b-v1.5-16k
parameters:
  t:
    - filter: self_attn
      value: [0, 0.5, 0.3, 0.7, 1]
    - filter: mlp
      value: [1, 0.5, 0.7, 0.3, 0]
    - value: 0.5 # fallback for rest of tensors
dtype: float16

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры: LlamaForCausalLM
Ревизия весов: 3afc764