/ Модель

Характеристики

Контекст
81 920 токенов
Параметры
7,2 млрд
Архитектура
mistral · dense
Опубликована
18 окт 2023

mistral-7b-80k

Генерация текстаТекст → текст3 профессии

Англо-китайская базовая авторегрессионная модель Mistral на 7,2 млрд параметров для генерации текста с контекстом до 81 920 токенов.

505скачиваний за 30 дней0лайковвеса обновлены29 окт 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

hongyin/mistral-7b-80k — англо-китайская авторегрессионная языковая модель, представленная автором карточки и обученная на Mistral-7B. Она содержит около 7,2 млрд параметров, использует архитектуру MistralForCausalLM и поддерживает контекст до 81 920 токенов. Репозиторий содержит веса в формате PyTorch.

Модель предназначена для генерации текста и обработки длинных последовательностей на английском и китайском языках. Автор описывает её как базовую модель, а не чат-бот; практические сценарии диалогового использования карточка не заявляет. Лицензия в предоставленных данных не указана.

Сценарии применения

  • генерация продолжений текста на английском
  • генерация продолжений текста на китайском
  • обработка длинных текстовых последовательностей
  • эксперименты с базовой языковой моделью Mistral

Ограничения

Автор указывает, что это базовая модель и она не предназначена для использования как чат-бот. Лицензия в предоставленных данных отсутствует.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

hongyin/mistral-7b-80k

I am pleased to introduce an English-Chinese bilingual autoregressive language model. The model is trained on Mistral-7b, with a unique vocabulary and 7 billion parameters. Our goal is to provide a solution that is computationally cheap and easy to reason about. It is important to note that this is a basic model, not intended for use as a chatbot, but for alchemy. We look forward to providing you with practical model products.

Losing fat is the only way to solve all problems.

Bibtex entry and citation info

Please cite if you find it helpful.

@article{zhu2023metaaid,
  title={MetaAID 2.0: An Extensible Framework for Developing Metaverse Applications via Human-controllable Pre-trained Models},
  author={Zhu, Hongyin},
  journal={arXiv preprint arXiv:2302.13173},
  year={2023}
}


license: other

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
MistralForCausalLM
Ревизия весов
52de787

0 моделей