/ Модель

Характеристики

Контекст
4 096 токенов
Параметры
12,9 млрд
Размер весов
52,1 ГБ
Лицензия
Apache 2.0
Архитектура
llama · dense
Библиотека
transformers
Опубликована
31 янв 2024

koen-llama2-13b-dpotrain_testver

Генерация текстаТекст → текст3 профессии

Корейскоязычная модель LLaMA 2 на 12,9 млрд параметров, дообученная методом DPO для генерации текста с учётом предпочтений.

16скачиваний за 30 дней0лайковвеса обновлены31 янв 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель testmod/koen-llama2-13b-dpotrain_testver — авторегрессионная языковая модель на архитектуре трансформера LLaMA 2, дообученная методом DPO на парах предпочтений chosen/rejected. Она предназначена для генерации текста и может использоваться в сценариях, где требуется получать ответы или продолжения текста с учётом предпочтений, заданных при обучении. Модель принимает текст и выдаёт текст.

Модель содержит 12,9 млрд параметров, имеет контекстное окно 4096 токенов и распространяется в формате safetensors. В карточке указаны корейский язык и лицензия Apache 2.0. Базовая модель — testmod/koen-llama2-13b-avg_testver.

Сценарии применения

  • генерация корейского текста
  • создание ответов на текстовые запросы
  • продолжение корейских текстов
  • адаптация ответов под предпочтения из пар chosen/rejected

Ограничения

Контекстное окно ограничено 4096 токенами. README не описывает результаты оценки качества или конкретные ограничения поведения модели.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Input Models input text only.

Output Models generate text only.

Model Architecture
Auto-regressive language model based on the LLaMA2 transformer architecture.

Base Model
testmod/koen-llama2-13b-avg_testver

Training Objective
dpo trained with chosen/rejected pair datasets.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
d5eb1b9

0 моделей