Компактная авторегрессионная модель Llama на 2,7 млрд параметров для генерации текста на корейском и английском языках.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
urLLM-KO_EN-2.7B — авторегрессионная языковая модель на базе архитектуры Llama, разработанная URP. Она основана на princeton-nlp/Sheared-LLaMA-2.7B и обучена на отобранных данных Modu Corpus, корейской Википедии и англоязычных новостях Kaggle общим объёмом около 36 ГБ. Словарь расширен до 51 385 токенов.
Модель предназначена для генерации текста на корейском и английском языках. Её можно использовать для продолжения текста, составления черновиков и создания диалоговых ответов на этих языках. Размер модели — 2,7 млрд параметров; максимальный контекст составляет 4096 токенов.
В карточке указана лицензия CC BY-NC 4.0, которая ограничивает коммерческое использование. Данные обучения описаны только на общем уровне, поэтому качество модели для конкретных задач и ограничения по темам не установлены.
Карточка не приводит оценок качества или результатов тестирования, поэтому пригодность для конкретных сценариев не подтверждена. Лицензия CC BY-NC 4.0 запрещает коммерческое использование.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
Model Architecture:
urLLM-KO_EN-2.7B is an auto-regressive language model that leverages an optimized transformer architecture derived from princeton-nlp/Sheared-LLaMA-2.7B.
Training Corpus
The model was trained using selected datasets from Modu Corpus, Korean Wikipedia and Kaggle English News (approximately total 36GB).
Vocab Expansion
The expanded vocab size is 51385.
Model Card Contact
For errors or additional questions about details in this model card, contact pkchae@urp.kr .
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…