Компактная MiniLlama, дообученная для ответов на инструкции и выполнения коротких задач на армянском языке.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
Armenian-MiniLlama 100M Instruct — компактная языковая модель Evanroubert для выполнения инструкций и ответов на вопросы на армянском языке. Это дообученная методом supervised fine-tuning модель семейства MiniLlama с плотной архитектурой MiniLlamaForCausalLM и 88,1 млн параметров; она принимает текст и выдаёт текст. В карточке указано обучение на 41 600 очищенных армянских инструкциях из набора saillab/alpaca-armenian-cleaned и формат диалога с разделением на инструкцию и ответ. Контекст модели — 512 токенов.
Модель предназначена для коротких диалоговых запросов и простых задач на армянском языке. Небольшой размер позволяет рассматривать её для локального запуска на периферийных устройствах и в браузере; README также приводит ориентировочный объём около 200 МБ в FP16 и 55 МБ в INT4. Репозиторий содержит веса PyTorch, лицензия — MIT. Небольшое число параметров и короткий контекст ограничивают её пригодность для сложных задач и длинных документов.
Контекст ограничен 512 токенами, а небольшой размер модели может снижать качество на сложных задачах. Карточка описывает специализацию на армянском языке.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
The fine-tuned conversational instruction-following variant of Armenian-MiniLlama 100M, trained on 41,600 clean Armenian instructions from saillab/alpaca-armenian-cleaned.
### Հրահանգ:
{instruction}
### Պատասխան:
{response}
<|endoftext|>).На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Архитектура minillama неизвестна transformers в образе рантайма.