/ Модель

Характеристики

Контекст
1 024 токена
Лицензия
MIT
Архитектура
gpt2 · dense
Опубликована
4 фев 2024

distillgpt2Cinder

Генерация текстаТекст → текст3 профессии

Экспериментальная текстовая модель на основе DistilGPT-2 для многоходовых диалогов с персонажами.

84скачиваний за 30 дней1лайквеса обновлены9 мар 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Josephgflowers/distillgpt2Cinder — экспериментальная модель генерации текста для многоходового диалога с персонажами. В карточке она описана как исходный запуск Cinder на основе DistilGPT-2; пример показывает персонажа Синдер, гуманоидного робота для космических исследований. Архитектура — GPT-2 с плотной языковой моделью GPT2LMHeadModel, формат весов — safetensors, размер контекстного окна — 1024 токена.

Модель предназначена для продолжения диалогов в формате с метками ролей USER и CINDER. README предупреждает, что ответы иногда бывают нестабильными. В метаданных указана лицензия MIT. Данных о поддерживаемых естественных языках и специализированных областях применения нет.

Сценарии применения

  • ведение диалога с персонажем по имени Синдер
  • генерация реплик в формате USER/CINDER
  • продолжение многоходового чата с персонажами

Ограничения

В README отмечено, что модель иногда работает с ошибками; контекст ограничен 1024 токенами. Языковая поддержка отдельно не описана.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

This is a distilgpt2 orginal run of Cinder with multi character chat. A little glitchy sometimes. The end sequence for each statement is <END>

If you would like multi chat with characters it is recommended to use <END>\nUSER: as the stop token.

USER: Hi, What is your name? Tell me about yourself.

CINDER: "I'm Cinder," a humanoid in my humanoid form. I was first introduced into the vastness of space during my lifetime.

Today, I'm a humanoid robot, and I'm designed for cosmic exploration, which is a subject of much speculation.

However, I'm designed for space exploration and scientific exploration.

image/png

Open LLM Leaderboard Evaluation Results

Detailed results can be found here

MetricValue
Avg.28.50
AI2 Reasoning Challenge (25-Shot)24.49
HellaSwag (10-Shot)27.24
MMLU (5-Shot)24.97
TruthfulQA (0-shot)43.96
Winogrande (5-shot)50.12
GSM8k (5-shot)0.23

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
GPT2LMHeadModel
Ревизия весов
ce802cc

0 моделей