/ Модель

Характеристики

Контекст
1 024 токена
Архитектура
gpt2 · dense
Опубликована
2 мар 2022

elonmusk

Генерация текстаТекст → текст3 профессии

Дообученная на твитах Илона Маска GPT-2 для генерации коротких англоязычных текстов в похожем стиле.

320скачиваний за 30 дней11лайковвеса обновлены25 мая 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

huggingtweets/elonmusk — небольшая модель генерации текста на базе GPT-2, созданная Борисом Даймой в рамках проекта HuggingTweets. Она дообучена на опубликованных твитах Илона Маска: в обучающую выборку вошли 3104 твита, включая 196 ретвитов и 1286 коротких сообщений.

Модель предназначена для генерации продолжений текста в стиле корпуса твитов, например для создания коротких публикаций по заданному началу. Её можно запускать через библиотеку Transformers с задачей text-generation. Контекст модели составляет 1024 токена; формат весов — PyTorch. В метаданных указан английский язык.

Качество и содержание зависят от небольшого и специфичного корпуса твитов. Модель наследует ограничения и смещения GPT-2, а обучающие данные дополнительно влияют на генерируемый текст. Сведения о лицензии в предоставленных материалах отсутствуют.

Сценарии применения

  • генерация продолжения твита по заданному началу
  • создание коротких публикаций в стиле корпуса Илона Маска
  • эксперименты с генерацией текста на основе пользовательских сообщений

Ограничения

Модель обучена на небольшом корпусе твитов и наследует ограничения и смещения GPT-2; результаты могут отражать содержание и особенности этих публикаций. Лицензия не описана в предоставленных материалах.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

I was made with huggingtweets.

Create your own bot based on your favorite user with the demo!

How does it work?

The model uses the following pipeline.

pipeline

To understand how the model was developed, check the W&B report.

Training data

The model was trained on tweets from Elon Musk.

DataElon Musk
Tweets downloaded3104
Retweets196
Short tweets1286
Tweets kept1622

Explore the data, which is tracked with W&B artifacts at every step of the pipeline.

Training procedure

The model is based on a pre-trained GPT-2 which is fine-tuned on @elonmusk's tweets.

Hyperparameters and metrics are recorded in the W&B training run for full transparency and reproducibility.

At the end of training, the final model is logged and versioned.

How to use

You can use this model directly with a pipeline for text generation:

from transformers import pipeline
generator = pipeline('text-generation',
                     model='huggingtweets/elonmusk')
generator("My dream is", num_return_sequences=5)

Limitations and bias

The model suffers from the same limitations and bias as GPT-2.

In addition, the data present in the user's tweets further affects the text generated by the model.

About

Built by Boris Dayma

Follow

For more details, visit the project repository.

GitHub stars

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
GPT2LMHeadModel
Ревизия весов
9d0073c

0 моделей