Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
weathermanj/llama3-40-layer — текстовая генеративная модель, созданная с помощью mergekit из слоёв meta-llama/Meta-Llama-3-8B-Instruct. При объединении методом passthrough взяты диапазоны слоёв [0, 20] и [12, 32], поэтому итоговая модель содержит 40 слоёв; веса представлены в формате safetensors, исходная конфигурация merge указывает на bfloat16.
Модель предназначена для генерации текста и диалоговых ответов. Она основана на архитектуре Llama, имеет около 9,2 млрд параметров и контекст длиной до 8192 токенов. Метаданные указывают на возможность чата; описание базовой модели отмечает английский язык.
Это экспериментальная производная модель: карточка описывает способ сборки, но не приводит сравнительных оценок качества или специализированных сценариев применения. Для использования и распространения следует учитывать лицензию базовой модели Meta-Llama-3-8B-Instruct.
Сценарии применения
генерация текста по запросу
диалоговые ответы на английском языке
создание черновиков и продолжение текста
Ограничения
Карточка не приводит оценок качества или сведений о специализированной настройке; назначение ограничивается общими генерацией текста и диалогом. При использовании нужно учитывать лицензию базовой модели Meta-Llama-3-8B-Instruct.
Для каких профессий подходит4
Разделы каталога профессий, в задачах которых используется эта модель