Uploaded model
- Developed by: tsudhahar
- License: apache-2.0
- Finetuned from model : unsloth/meta-llama-3.1-8b-bnb-4bit
This llama model was trained 2x faster with Unsloth and Huggingface's TRL library.
Характеристики
- Контекст
- 131 072 токена
- Параметры
- 7,5 млрд
- Размер весов
- 16,1 ГБ
- Лицензия
- Apache 2.0
- Архитектура
- llama · dense
- Базовая модель
- meta-llama-3.1-8b-bnb-4bit
- Опубликована
- 4 дек 2024
Ссылки
LlamaCarbon-0.2-8B
Генерация текстаТекст → текст
Дообученная 7,5-миллиардная языковая модель семейства Llama для генерации текста с контекстом до 131 072 токенов.
16скачиваний за 30 дней0лайковвеса обновлены4 дек 2024
Бенчмарки
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Тесты пользователейпока нет
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Добавьте модель в бенчмарк
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Опишите свои задачи
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Запустите и опубликуйте
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Публичные оценки
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
LlamaCarbon-0.2-8B — языковая модель, дообученная разработчиком tsudhahar на базе unsloth/meta-llama-3.1-8b-bnb-4bit с использованием Unsloth и библиотеки TRL. Это плотная модель семейства Llama с архитектурой LlamaForCausalLM, содержащая 7,5 млрд параметров и рассчитанная на генерацию текста; заявленный размер контекста — 131 072 токена. В метаданных указан английский язык и формат safetensors.
Модель подходит для генерации продолжений текста и других сценариев, основанных на текстовом вводе и выводе. README не описывает специализированную область применения или результаты оценки качества. Модель распространяется по лицензии Apache-2.0.
Сценарии применения
- генерация текста по запросу
- написание черновиков и продолжений текста
- создание ответов на текстовые подсказки
Ограничения
README не приводит оценок качества, подробностей обучающих данных или специализированных возможностей модели.
Карточка модели
README от автора на Hugging Face, как он его опубликовал
Как запустить
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…
- Класс архитектуры
- LlamaForCausalLM
- Ревизия весов
- c35c199