Uploaded model
- Developed by: ale045
- License: apache-2.0
- Finetuned from model : ale045/kaggle_math_model_v2
This llama model was trained 2x faster with Unsloth and Huggingface's TRL library.
Характеристики
- Контекст
- 12 288 токенов
- Параметры
- 7,5 млрд
- Размер весов
- 16,1 ГБ
- Лицензия
- Apache 2.0
- Архитектура
- llama · dense
- Базовая модель
- kaggle_math_model_v2
- Опубликована
- 3 июн 2024
Ссылки
kaggle_math_model_v6
Генерация текстаТекст → текст
Дообученная 7,5-миллиардная модель Llama для генерации текста, относящаяся к серии Kaggle Math.
14скачиваний за 30 дней0лайковвеса обновлены7 июн 2024
Бенчмарки
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Тесты пользователейпока нет
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Добавьте модель в бенчмарк
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Опишите свои задачи
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Запустите и опубликуйте
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Публичные оценки
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
ale045/kaggle_math_model_v6 — дообученная ale045 модель семейства Llama для генерации текста. В карточке указано, что она обучалась с использованием Unsloth и библиотеки TRL. Модель содержит 7,5 млрд параметров, работает с контекстом до 12 288 токенов и распространяется в формате safetensors.
Модель предназначена для текстовой генерации; по названию и базовой модели она относится к серии Kaggle Math, однако README не описывает конкретные математические навыки или качество решения задач. Лицензия — Apache-2.0.
Сценарии применения
- генерация текстовых ответов на математические вопросы
- эксперименты с дообучением Llama для математических задач
- создание текстовых решений задач для Kaggle
Ограничения
README не приводит оценок качества и не уточняет перечень поддерживаемых математических задач; назначение выводится из названия серии модели.
Карточка модели
README от автора на Hugging Face, как он его опубликовал
Как запустить
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…
- Класс архитектуры
- LlamaForCausalLM
- Ревизия весов
- 89a09fc