Uploaded model
- Developed by: Quentin123
- License: apache-2.0
- Finetuned from model : unsloth/llama-3.2-3b-instruct-bnb-4bit
This llama model was trained 2x faster with Unsloth and Huggingface's TRL library.
Quentin123/Llama-3.1-8B-bnb-4bit — дообученная версия модели unsloth/llama-3.2-3b-instruct-bnb-4bit, разработанная пользователем Quentin123.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
Модель предназначена для генерации текста и может использоваться в сценариях, поддерживаемых экосистемами Transformers и Text Generation Inference, включая запуск инструкционно-ориентированных языковых моделей и интеграцию в приложения на базе Hugging Face. В обучении применялись Unsloth и библиотека TRL; согласно README, обучение выполнялось с заявленным ускорением в два раза.
Из доступных данных известно, что модель использует 4-битное квантование и относится к семейству Llama. В метаданных указан английский язык, однако подробные сведения об архитектуре, фактическом количестве параметров, размере контекста, поддерживаемых модальностях, качестве, датасете и результатах оценки отсутствуют. Поэтому сильные стороны можно связывать только с компактным квантованным форматом и совместимостью с популярными инструментами, а ограничения — с неполнотой опубликованной информации и невозможностью подтвердить заявленное идентификатором соответствие Llama 3.1 8B: README указывает базовую модель Llama 3.2 3B. Лицензия — Apache-2.0.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
This llama model was trained 2x faster with Unsloth and Huggingface's TRL library.
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…