Базовая языковая модель с архитектурой Llama 2 и весами Mistral для генерации текста.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
Cartinoe5930/Llama2_init_Mistral — базовая модель с архитектурой Llama 2, инициализированная весами Mistral; в README она представлена как реализация базовой модели SOLAR-10.7B. Это плотная авторегрессионная языковая модель на 7,1 млрд параметров для генерации текста. Метаданные указывают контекст 4096 токенов и формат safetensors.
Модель подходит для генерации продолжений текста и других сценариев, построенных на text-generation. В README приведены результаты на тестах ARC, HellaSwag, MMLU, TruthfulQA, Winogrande и GSM8K, но конкретные условия оценки не описаны. Модель опубликована под лицензией Apache-2.0.
README не описывает языковое покрытие и условия тестирования приведённых бенчмарков. Указанный контекст составляет 4096 токенов.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
This model is the base model implementation of SOLAR-10.7B. The architecture of base model is Llama2 architecture and initialized with weights of Mistral.
Please check specific details in the GitHub Repository.
GitHub Repository: https://github.com/gauss5930/iDUS
| Model | ARC | HellaSwag | MMLU | TruthfulQA | Winogrande | GSM8K | Average |
|---|---|---|---|---|---|---|---|
| Llama2_init_Mistral | 60.07 | 83.3 | 64.09 | 42.15 | 78.37 | 37.91 | 60.98 |
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…