Русскоязычная GPT-2 для генерации текстов по вселенной Warhammer 40,000.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
zlsl/ru_warhammer40k — русскоязычная модель генерации текста по вселенной Warhammer 40,000, включая период Ереси Хоруса и более поздние книги. Она предназначена для создания тематических текстов по запросу и построена на архитектуре GPT-2; модель работает с текстом и имеет контекстное окно 2048 токенов. Опубликована в форматах PyTorch и Safetensors, распространяется по лицензии Apache-2.0.
Модель подходит для генерации фанатских рассказов, описаний персонажей и событий, а также для продолжения текстов в сеттинге Warhammer 40,000. README сообщает о проблеме загрузки токенизатора в text-generation-webui для моделей семейства GPT-2 и приводит обходной путь с настройкой eos_token_id. Карточка не сообщает размер модели и оценку качества.
Контекст ограничен 2048 токенами. README описывает проблему загрузки токенизатора в text-generation-webui и предлагает обходной путь через установку eos_token_id в значение 2.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
Модель для генерации русских текстов по вселенной Warhammer40k (от ереси Хоруса до свежих книг)
В инструменте поломана работа с GPT-2, GPTJ, GPT-NEO и аналогичными модлями, неверно загружается токенизер. Ошибка такая:
eos_token_id = eos_token_id[0] IndexError: list index out of range
Исправляется легко, в файл modules/models.py в функцию load_tokenizer() надо добавить строчку tokenizer.eos_token_id = 2 перед return tokenizer
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм · transformers
Подбираем GPU…