Uploaded model
- Developed by: KR-X-AI
- License: apache-2.0
- Finetuned from model : unsloth/gemma-2-9b-it-bnb-4bit
This gemma2 model was trained 2x faster with Unsloth and Huggingface's TRL library.
Характеристики
- Контекст
- 8 192 токена
- Параметры
- 9 млрд
- Размер весов
- 18,5 ГБ
- Лицензия
- Apache 2.0
- Архитектура
- gemma2 · dense
- Базовая модель
- gemma-2-9b-it-bnb-4bit
- Опубликована
- 15 ноя 2024
Ссылки
krx-gemma2-7b-it-v2
Генерация текстаТекст → текст
Производная модели KR-X-AI/krx-gemma-2-9b-4-8-8-tb-3. Дообученная разговорная модель Gemma 2 с 9 млрд параметров для диалогов и генерации текста.
11скачиваний за 30 дней0лайковвеса обновлены15 ноя 2024
Бенчмарки
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Тесты пользователейпока нет
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Добавьте модель в бенчмарк
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Опишите свои задачи
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Запустите и опубликуйте
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Публичные оценки
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
Карточка модели KR-X-AI/krx-gemma2-7b-it-v2 на Hugging Face совпадает с карточкой KR-X-AI/krx-gemma-2-9b-4-8-8-tb-3, поэтому описание составлено по ней.
KR-X-AI выпустила разговорную модель генерации текста на базе Gemma 2. Это дообучение unsloth/gemma-2-9b-it-bnb-4bit с использованием Unsloth и библиотеки TRL; модель содержит 9 млрд параметров, использует плотную архитектуру Gemma2 и поддерживает контекст до 8192 токенов. Она предназначена для диалогов и генерации текста по запросу. Модель принимает текст и выдаёт текст; в метаданных указан английский язык. Репозиторий распространяется по лицензии Apache-2.0.
Сценарии применения
- ответы на вопросы в текстовом чате
- ведение диалога с пользователем
- генерация текста по текстовой инструкции
Ограничения
Описание не приводит результатов оценки качества или подробностей обучающих данных, поэтому их нельзя использовать для сравнения модели с другими чекпойнтами.
Карточка модели
README от автора на Hugging Face, как он его опубликовал
Как запустить
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…
- Класс архитектуры
- Gemma2ForCausalLM
- Ревизия весов
- 38f2519