/ Модель

Характеристики

Контекст
32 768 токенов
Параметры
7,1 млрд
Размер весов
14,5 ГБ
Лицензия
Apache 2.0
Архитектура
mistral · dense
Базовая модель
mistral-7b-instruct-v0.2-bnb-4bit
Опубликована
28 апр 2024

Mistral-7B-Headline-QLoRA

Генерация текстаТекст → текст5 профессий

Дообученная 7,1-миллиардная модель Mistral для генерации английского текста и заголовков в диалоговом формате.

16скачиваний за 30 дней1лайквеса обновлены28 апр 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Sardean-UChicago/Mistral-7B-Headline-QLoRA — дообученная языковая модель семейства Mistral для генерации текста в диалоговом формате. Она основана на unsloth/mistral-7b-instruct-v0.2-bnb-4bit и содержит 7,1 млрд параметров. Для обучения использовались Unsloth и библиотека Hugging Face TRL.

Модель может служить основой для генерации заголовков и других текстовых ответов на английском языке. Архитектура — плотная авторегрессионная MistralForCausalLM; заявленный контекст составляет 32 768 токенов. Репозиторий распространяется по лицензии Apache-2.0.

Сценарии применения

  • генерация заголовков к тексту
  • создание коротких английских текстов
  • ответы на запросы в диалоговом формате

Ограничения

Карточка не приводит оценок качества или подробностей обучающих данных, поэтому пригодность для конкретных сценариев генерации заголовков следует проверять на собственных примерах.

Для каких профессий подходит5

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Uploaded model

  • Developed by: Sardean-UChicago
  • License: apache-2.0
  • Finetuned from model : unsloth/mistral-7b-instruct-v0.2-bnb-4bit

This mistral model was trained 2x faster with Unsloth and Huggingface's TRL library.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
MistralForCausalLM
Ревизия весов
9c0a798

0 моделей