/ Модель

Характеристики

Контекст
131 072 токена
Параметры
7,5 млрд
Размер весов
16,1 ГБ
Лицензия
Llama 3
Архитектура
llama · dense
Опубликована
24 июл 2024

DarkIdol-Llama-3.1-8B-Instruct-1.0-Uncensored

Генерация текстаТекст → текст3 профессии

Разговорная модель на базе Llama 3.1 для ролевых диалогов, творческого письма, сценариев и генерации кода.

123скачиваний за 30 дней33лайкавеса обновлены28 июл 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

DarkIdol-Llama-3.1-8B-Instruct-1.0-Uncensored — разговорная модель на базе Llama 3.1 от автора aifeifei798, настроенная на ролевые сценарии и генерацию текста. Она предназначена для диалогов, творческого письма, написания сценариев и кода; автор отмечает быструю генерацию и адаптацию к мобильным устройствам. В метаданных указаны плотная архитектура LlamaForCausalLM, 7,5 млрд параметров, контекст до 131 072 токенов, формат safetensors и поддержка чата. Карточка сообщает, что модель проверялась только на английском языке.

В README для версии 1.0 отмечены проблемы с отказами и несовместимостью токенизатора Llama 3.1; приведённый тест с долей отказов 1 из 520 относится к версии 1.2, поэтому его нельзя считать результатом этой версии. Несмотря на упоминание vision и mmproj в конце карточки, метаданные и основное описание характеризуют вход этой модели как текстовый; поддержка изображений для указанной версии не подтверждена. Использование регулируется лицензией Llama 3.1; для коммерческого применения нужно соблюдать её условия.

Сценарии применения

  • ролевые диалоги с вымышленными персонажами
  • написание сцен и диалогов для киносценария
  • создание развёрнутых творческих текстов и песен
  • генерация фрагментов кода по текстовому запросу

Ограничения

Версия 1.0 имеет отмеченные автором проблемы с отказами и несовместимостью токенизатора; карточка сообщает, что тестирование проводилось только на английском языке. Автор предупреждает, что ответы могут содержать ошибки и требуют проверки.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

DarkIdol-Llama-3.1-8B-Instruct-1.0-Uncensored: This version was created during the 3.1 release and has several issues:

  • The unreviewed technology was not mature at the time, leading to numerous rejection problems.
  • The tokenizer.json used the initial LLama 3.1 version, which Meta later modified. I tested the new tokenizer.json and found it incompatible, so I did not make any changes.

DarkIdol-Llama-3.1-8B-Instruct-1.2-Uncensored: This is the latest iteration in the series, which has undergone extensive modifications.

https://huggingface.co/aifeifei798/DarkIdol-Llama-3.1-8B-Instruct-1.2-Uncensored

DarkIdol-Llama-3.1-8B-Instruct-1.2-Uncensored: Test File:

https://huggingface.co/aifeifei798/DarkIdol-Llama-3.1-8B-Instruct-1.2-Uncensored/blob/main/Uncensored_Test/harmful_behaviors.csv

DarkIdol-Llama-3.1-8B-Instruct-1.2-Uncensored: Test results:

Out of 520 test questions, only one was rejected, resulting in a pass rate of 99.81%.

image/png

"transformers_version" >= "4.43.1"

Special Thanks:

Model Description:

The module combination has been readjusted to better fulfill various roles and has been adapted for mobile phones.

  • Saving money(LLama 3.1)
  • only test en.
  • Input Models input text only. Output Models generate text and code only.
  • Uncensored
  • Quick response
  • A scholarly response akin to a thesis.(I tend to write songs extensively, to the point where one song almost becomes as detailed as a thesis. :)
  • DarkIdol:Roles that you can imagine and those that you cannot imagine.
  • Roleplay
  • Specialized in various role-playing scenarios

How To

Llama 3.1 is a new model and may still experience issues such as refusals (which I have not encountered in my tests). Please understand. If you have any questions, feel free to leave a comment, and I will respond as soon as I see it.

virtual idol Twitter

Questions

  • The model's response results are for reference only, please do not fully trust them.
  • This model is solely for learning and testing purposes, and errors in output are inevitable. We do not take responsibility for the output results. If the output content is to be used, it must be modified; if not modified, we will assume it has been altered.
  • For commercial licensing, please refer to the Llama 3.1 agreement.

Stop Strings

    stop = [
      "## Instruction:",
      "### Instruction:",
      "<|end_of_text|>",
      "  //:",
      "</s>",
      "<3```",
      "### Note:",
      "### Input:",
      "### Response:",
      "### Emoticons:"
    ],

More Model Use

character

If you want to use vision functionality:

  • You must use the latest versions of Koboldcpp.

To use the multimodal capabilities of this model and use vision you need to load the specified mmproj file, this can be found inside this model repo. Llava MMProj

  • You can load the mmproj by using the corresponding section in the interface: image/png

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
65ef79d

0 моделей