Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
OhCherryFire/llama2-7b-gsm8k-policy-hf — дообученная модель на базе Llama 2 для генерации текста при решении задач GSM8K. В карточке она описана как supervised fine-tuning для метода декодирования и обучения с поиском по дереву, подобным AlphaZero, из работы «Alphazero-like tree-search can guide large language model decoding and training» (ICML 2024).
Модель имеет плотную архитектуру LlamaForCausalLM, около 6,6 млрд параметров и контекст 4096 токенов. Она рассчитана на англоязычные математические текстовые задачи и выдаёт текст; репозиторий содержит веса PyTorch. Лицензия в предоставленных данных не указана.
Сценарии применения
генерация решений задач GSM8K
пошаговое решение текстовых математических задач на английском
исследование поиска по дереву при декодировании LLM
Ограничения
Карточка не приводит оценки качества или подробностей применимости за пределами GSM8K. Лицензия в предоставленных данных не указана.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель
@article{feng2023alphazero,
title={Alphazero-like tree-search can guide large language model decoding and training},
author={Feng, Xidong and Wan, Ziyu and Wen, Muning and Wen, Ying and Zhang, Weinan and Wang, Jun},
journal={arXiv preprint arXiv:2309.17179},
year={2023}
}
Как запустить
На своей GPU в ailist. Цена — по текущим предложениям провайдеров