/ Модель

Характеристики

Контекст
8 192 токена
Параметры
7,5 млрд
Размер весов
16,1 ГБ
Лицензия
Своя лицензия
Архитектура
llama · dense
Базовая модель
PP_0.71b
Библиотека
transformers
Опубликована
2 мая 2024

Poppy_Porpoise-0.72-L3-8B

Генерация текстаТекст → текст5 профессий

Слияние моделей Nitral-AI для диалоговой генерации текста с дополнительной поддержкой анализа изображений через Llava MMProj.

56скачиваний за 30 дней38лайковвеса обновлены4 июл 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Nitral-AI/Poppy_Porpoise-0.72-L3-8B — разговорная модель семейства Llama с плотной архитектурой LlamaForCausalLM и примерно 7,5 млрд параметров. Она создана слиянием моделей Nitral-AI/PP_0.71a и Nitral-AI/PP_0.71b. Основная задача — генерация текста в диалоге; для работы с изображениями в README указана поддержка Llava MMProj, который требуется загрузить отдельно из репозитория.

Модель принимает текстовые сообщения и выдаёт текст. Контекст составляет 8192 токена. Для использования зрительных функций автор рекомендует актуальную версию Koboldcpp и загрузку соответствующего файла MMProj. Репозиторий содержит веса в формате Safetensors. Лицензия обозначена как other, поэтому конкретные условия использования следует сверить с карточкой модели и файлами репозитория.

Сценарии применения

  • ведение диалогов с пользователем
  • генерация ответов на текстовые запросы
  • описание изображений при подключённом Llava MMProj

Ограничения

Для зрительных функций необходим отдельный файл Llava MMProj и актуальная версия Koboldcpp. Конкретные условия лицензии из доступных данных неясны.

Для каких профессий подходит5

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

"Poppy Porpoise" is a cutting-edge AI roleplay assistant based on the Llama 3 8B model, specializing in crafting unforgettable narrative experiences. With its advanced language capabilities, Poppy expertly immerses users in an interactive and engaging adventure, tailoring each adventure to their individual preferences.

image/png

Quants Available From Lewdiculus: https://huggingface.co/Lewdiculous/Poppy_Porpoise-0.72-L3-8B-GGUF-IQ-Imatrix

Recomended ST Presets:(Updated for 0.72) Porpoise Presets

If you want to use vision functionality:

  • You must use the latest versions of Koboldcpp.

To use the multimodal capabilities of this model and use vision you need to load the specified mmproj file, this can be found inside this model repo. Llava MMProj

  • You can load the mmproj by using the corresponding section in the interface:

image/png

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
29a54a6

0 моделей