Компактная франкоязычная модель семейства Llama для генерации текста и ответов на инструкции, дообученная методом QLoRA.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
MiniMerlin-3b-v0.1 — компактная языковая модель, дообученная teilomillet методом instruction tuning с QLoRA на франкоязычном наборе данных. Это плотная causal language model семейства Llama примерно на 2,9 млрд параметров с контекстом 4096 токенов, предназначенная для генерации текста и выполнения инструкций на французском языке.
Автор описывает модель как эксперимент по настройке поведения на пользовательском наборе данных и проверке того, перенимает ли модель характер ответов из этого набора. Обучение проводилось одну эпоху; модель задумана как можно более компактной и относится к началу серии экспериментов. Репозиторий содержит веса Safetensors. Лицензия — Apache-2.0.
Модель обучалась одну эпоху на экспериментальном наборе данных, поэтому качество и устойчивость ответов могут быть ограничены. Контекст составляет 4096 токенов.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
FT : @teilomillet
Instruction tune using QLoRA on a french dataset for 1 epoch. The aim was to test and try the dataset. Implementing a customization via a dataset and fine-tuning on it. The way to respond is also important to see if it's taken from the dataset and add to the customization.
This is the first of a long serie of multiple models. Aimed to be minuscule as possible.
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…