/ Модель

Характеристики

Контекст
32 768 токенов
Параметры
7,1 млрд
Размер весов
16,5 ГБ
Лицензия
CC BY-NC 4.0
Архитектура
llava_mistral · MoE
Опубликована
6 мая 2024

CuMo-mistral-7b

Генерация текстаТекст → текст3 профессии

Мультимодальная модель SHI-Labs на базе Mistral-7B-Instruct-v0.2 для исследований и разработки чат-ботов.

88скачиваний за 30 дней14лайковвеса обновлены9 мая 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

CuMo-mistral-7b — мультимодальная языковая модель, разработанная SHI-Labs на основе Mistral-7B-Instruct-v0.2. Это модель семейства LLaVA-Mistral с архитектурой MoE и 7,1 млрд параметров; она предназначена для исследовательской работы с мультимодальными моделями и чат-ботами. В метаданных указано текстовое генерирование и контекст до 32 768 токенов. Карточка называет модель мультимодальной, но не уточняет поддерживаемые модальности и языки. Модель распространяется по лицензии CC BY-NC 4.0, которая ограничивает коммерческое использование.

Сценарии применения

  • эксперименты с мультимодальными чат-ботами
  • генерация текстовых ответов в исследовательских прототипах
  • исследование больших мультимодальных языковых моделей

Ограничения

Карточка не описывает поддерживаемые модальности и языки, поэтому их нельзя надёжно определить. Лицензия CC BY-NC 4.0 ограничивает коммерческое использование.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

Архитектура llava_mistral неизвестна transformers в образе рантайма.

Класс архитектуры
LlavaMistralForCausalLM
Ревизия весов
0a80d73

0 моделей