Слитая компактная модель Llama на 3,9 млрд параметров для диалогов и генерации текста с контекстом до 131 072 токенов.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
Mobitron-4B — компактная языковая модель, созданная bunnycore слиянием трёх моделей семейства Llama через mergekit: Hubble-4B-v1, Llama-3.1-Minitron-4B-Magpie-SFT-750K-MT и Microtron-4B. Модель имеет плотную архитектуру LlamaForCausalLM, содержит 3,9 млрд параметров и предназначена для генерации текста и диалогов; заявленная длина контекста — до 131 072 токенов.
Модель распространяется в формате safetensors и имеет лицензию Apache-2.0. Карточка не описывает отдельные языковые или предметные специализации, поэтому её можно характеризовать как модель общего назначения. Сведения о качестве, результатах оценки и ограничениях использования в карточке не приведены.
Карточка не приводит результатов оценки качества и подробных ограничений модели.
README от автора на Hugging Face, как он его опубликовал
Mobitron-4B is a merge of the following models using mergekit:
models:
- model: TheDrummer/Hubble-4B-v1
- model: Magpie-Align/Llama-3.1-Minitron-4B-Magpie-SFT-750K-MT
- model: bunnycore/Microtron-4B
merge_method: model_stock
base_model: TheDrummer/Hubble-4B-v1
dtype: bfloat16
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…