Компактная двухслойная модель семейства Llama для генерации текста и тестирования обработки моделей, включая квантование.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
TheBlokeAI/JackFram-Llama-68M — компактная версия модели JackFram Llama 68M, подготовленная TheBlokeAI. В репозитории удалены файлы состояния обучения и веса преобразованы в формат safetensors; README указывает, что модель совместима с Llama 1 и содержит два слоя. Метаданные указывают 43,5 млн параметров и контекст 2048 токенов.
Модель предназначена прежде всего для генерации текста и проверки процессов квантования и других операций с моделями. Это облегчённый технический чекпойнт, а не полноразмерная модель для широкого применения. Лицензия в метаданных обозначена как other, без уточнения условий.
Модель содержит только два слоя и предназначена для тестирования процессов, поэтому её возможности генерации ограничены. Условия лицензии с меткой other требуют проверки перед использованием.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
This is JackFram's Llama 68M, with the following changes:
This lowers the size of the repo to 260MiB.
All credit for the creation of this mini Llama goes to the original author(s).
This tiny Llama model can be used to test quantization and other processes, as its a fully compatible Llama 1 model, but with only two layers.
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…