/ Модель

Характеристики

Контекст
2 048 токенов
Параметры
8,8 млрд
Лицензия
Своя лицензия
Архитектура
opt · dense
Опубликована
15 сен 2022

OPT-6.7B-Erebus

Генерация текстаТекст → текст3 профессии

OPT-6.7B-Erebus — англоязычная модель KoboldAI для генерации художественных текстов для взрослых и продолжения историй.

348скачиваний за 30 дней99лайковвеса обновлены19 сен 2022

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

KoboldAI/OPT-6.7B-Erebus — языковая модель для генерации текста, разработанная сообществом KoboldAI. Это второе поколение модели Shin'en, дообученное на шести источниках художественных текстов для взрослых; в данных использовалась разметка жанров формата [Genre: ]. Архитектура — плотная авторегрессионная OPTForCausalLM, репозиторий содержит веса PyTorch. Модель принимает текст и генерирует продолжение; контекст составляет 2048 токенов, основной язык — английский.

Модель предназначена прежде всего для генерации эротической прозы, продолжения историй и художественного ролевого текста. Она имеет выраженный уклон в NSFW-контент и не подходит для несовершеннолетних. Разработчики также отмечают возможные предвзятости по гендеру, профессии, расе и религии. Лицензия обозначена как other, поэтому условия использования следует проверять в репозитории модели.

Сценарии применения

  • генерация эротических рассказов на английском языке
  • продолжение художественной истории по заданному фрагменту
  • создание текста для ролевых сценариев для взрослых
  • генерация прозы с указанием жанра

Ограничения

Модель имеет сильный уклон в NSFW-контент и не подходит для несовершеннолетних. Возможны предвзятости по гендеру, профессии, расе и религии; условия лицензии требуют проверки в репозитории.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

OPT 6.7B - Erebus

Model description

This is the second generation of the original Shinen made by Mr. Seeker. The full dataset consists of 6 different sources, all surrounding the "Adult" theme. The name "Erebus" comes from the greek mythology, also named "darkness". This is in line with Shin'en, or "deep abyss". For inquiries, please contact the KoboldAI community. Warning: THIS model is NOT suitable for use by minors. The model will output X-rated content.

Training data

The data can be divided in 6 different datasets:

  • Literotica (everything with 4.5/5 or higher)
  • Sexstories (everything with 90 or higher)
  • Dataset-G (private dataset of X-rated stories)
  • Doc's Lab (all stories)
  • Pike Dataset (novels with "adult" rating)
  • SoFurry (collection of various animals)

The dataset uses [Genre: <comma-separated list of genres>] for tagging.

How to use

You can use this model directly with a pipeline for text generation. This example generates a different sequence each time it's run:

>>> from transformers import pipeline
>>> generator = pipeline('text-generation', model='KoboldAI/OPT-6.7B-Erebus')
>>> generator("Welcome Captain Janeway, I apologize for the delay.", do_sample=True, min_length=50)
[{'generated_text': 'Welcome Captain Janeway, I apologize for the delay."\nIt's all right," Janeway said. "I'm certain that you're doing your best to keep me informed of what\'s going on."'}]

Limitations and biases

Based on known problems with NLP technology, potential relevant factors include bias (gender, profession, race and religion). Warning: This model has a very strong NSFW bias!

License

OPT-6.7B is licensed under the OPT-175B license, Copyright (c) Meta Platforms, Inc. All Rights Reserved.

BibTeX entry and citation info

@misc{zhang2022opt,
      title={OPT: Open Pre-trained Transformer Language Models}, 
      author={Susan Zhang and Stephen Roller and Naman Goyal and Mikel Artetxe and Moya Chen and Shuohui Chen and Christopher Dewan and Mona Diab and Xian Li and Xi Victoria Lin and Todor Mihaylov and Myle Ott and Sam Shleifer and Kurt Shuster and Daniel Simig and Punit Singh Koura and Anjali Sridhar and Tianlu Wang and Luke Zettlemoyer},
      year={2022},
      eprint={2205.01068},
      archivePrefix={arXiv},
      primaryClass={cs.CL}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
OPTForCausalLM
Ревизия весов
9c4d1af

0 моделей