Дообученная на Guanaco модель LLaMA 2 на 6,6 млрд параметров для генерации текста и диалогов с улучшенными результатами на японском и китайском языках.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
Yoko-7B-Japanese-v1 — языковая модель для генерации текста, подготовленная лабораторией Mori при университете Йокогамы. Это плотная авторегрессионная модель семейства LLaMA 2 на 6,6 млрд параметров с контекстом до 4096 токенов, доступная в формате PyTorch. Модель дообучена с помощью QLoRA на базе LLaMA 2-7B на наборе Guanaco, включавшем 49 тысяч диалоговых и 280 тысяч недиалоговых примеров.
Модель предназначена для генерации ответов в диалоге и продолжения текста; авторы отмечают улучшение результатов на китайском и японском языках. В метаданных указана поддержка японского, английского и китайского. Лицензия — MIT. В README приведены ориентировочные параметры генерации: temperature 0,5–0,7, top-p 0,65–1,0, top-k 30–50 и штраф за повторы 1,03–1,17.
Контекст ограничен 4096 токенами. README не приводит количественных оценок качества или подробностей о поведении модели за пределами указанного улучшения результатов на японском и китайском языках.
README от автора на Hugging Face, как он его опубликовал
This model is traned with guanaco dataset. And this model used whole guanaco dataset by 49000 chat samples and 280000 non chat samples.
Improved performance in Chinese and Japanese.
Use the QLoRA to fine-tune the vanilla LLaMA2-7B.
And you can use test.py to test the model.
Contribute by Yokohama Nationaly University Mori Lab.
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…