Экспериментальная корейскоязычная чат-модель для проверки влияния префикса «정답: » в шаблоне диалога на оценку K-AI.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
AX-3.1-Light-sft_v0_21_prefill — экспериментальная корейскоязычная версия чат-модели, подготовленная jwg0830 на основе SKT A.X-3.1-Light. По README, её веса полностью совпадают с jwg0830/AX-3.1-Light-sft_v0_21; изменён только chat template: ответ ассистента начинается с префикса «정답: » («Ответ:»). Модель предназначена для проверки того, как формат вывода влияет на оценку в K-AI leaderboard: ожидается, что ответы будут начинаться с заданного префикса, а их содержание останется почти таким же.
Это плотная Llama-архитектура на 6,8 млрд параметров с контекстом до 32 768 токенов, работающая через Transformers и сохраняемая в safetensors. В обучающих данных упомянуты задачи по корейскому языку, медицине, а также машинному чтению финансовых и юридических документов. Модель генерирует текст в диалоговом режиме и рассчитана прежде всего на корейский язык. Лицензия указана как other; конкретные условия в доступных данных не раскрыты.
Это узкий экспериментальный пробник для оценки эффекта шаблона; README ожидает, что меняется формат начала ответа, а не его содержание. Указана лицензия «other», поэтому условия использования следует уточнить по карточке модели.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
jwg0830/AX-3.1-Light-sft_v0_21(K-AI 실제 평균 0.4326)와 가중치가 완전히 동일한
모델입니다. 유일한 차이는 chat_template.jinja의 assistant 턴 시작이
<|assistant|> 대신 <|assistant|>정답: 으로 프리필돼 있다는 것뿐입니다.
정답: X로 시작합니다.На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм · transformers
Подбираем GPU…