/ Модель

Характеристики

Контекст
2 048 токенов
Размер весов
24,2 ГБ
Лицензия
MIT
Архитектура
gptj · dense
Опубликована
9 апр 2023

gpt-j-6B-alpaca-gpt4

Генерация текстаТекст → текст5 профессий

Дообученная на ответах GPT-4 модель GPT-J-6B для генерации текста по инструкциям и запросам пользователя.

115скачиваний за 30 дней20лайковвеса обновлены9 апр 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

GPT-J-6B Alpaca-GPT4 — языковая модель Vicgalle, дообученная с помощью LoRA на ответах GPT-4 для запросов из Alpaca. Она предназначена для генерации ответов на инструкции и выполнения разнообразных текстовых запросов в формате «инструкция — ответ». Модель использует плотную архитектуру GPT-J с 6 млрд параметров и принимает текст, выдавая текст; в метаданных указан контекст до 2048 токенов и библиотека Transformers с весами PyTorch.

Модель подходит для диалоговых прототипов, написания и редактирования текстов, ответов на общие вопросы и выполнения простых инструкций. Примеры в карточке демонстрируют связные ответы, но не подтверждают точность фактов или надёжность в сложных задачах. Модель лицензирована по MIT.

Сценарии применения

  • ответы на общие вопросы
  • написание коротких текстов по заданной инструкции
  • создание стихотворений и публикаций для соцсетей
  • выполнение простых текстовых инструкций

Ограничения

Контекст ограничен 2048 токенами. Карточка не приводит оценок качества; ответы могут содержать ошибки и требуют проверки.

Для каких профессий подходит5

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

GPT-J-6B instruction-tuned on Alpaca-GPT4

This model was finetuned on GPT-4 generations of the Alpaca prompts, using LoRA for 30.000 steps (batch size of 128), taking over 7 hours in four V100S.

loss

Examples

The following samples were generated with {"temperature" : 0.7, "top_p" : 0.92, "top_k" : 0}:

Give three tips for a good meal
Below is an instruction that describes a task. Write a response that appropriately completes the request.

### Instruction:
Give three tips for a good meal.

### Response:


Tip 1: Make sure to enjoy your meal. It's easy to forget about enjoying yourself when you're hungry.
Tip 2: Try to eat a healthy meal that contains lots of vegetables and fruits.
Tip 3: Eat slowly and chew your food thoroughly. This will help you digest your meal better.
Write a poem about a delicious night
Below is an instruction that describes a task. Write a response that appropriately completes the request.

### Instruction:
Write a poem about a delicious night.

### Response:


> "The moon shone brightly on the night sky,
> 
> Stars twinkled brightly from afar.
> 
> Suddenly, my eyes saw the silhouette
> 
> Of a handsome stranger in the distance.
> 
> He walked slowly towards me with a smile.
> 
> He said, 'I've come to eat you up tonight.'
> 
> Suddenly, I knew that he was a cannibal!
> 
> 'Wait!' I cried as he approached.
> 
> I yelled, 'I'm vegetarian!'
> 
> Suddenly, he laughed and replied,
> 
> 'Oh, you silly girl! That's okay.'
> 
> Suddenly, he grabbed my hand and kissed it.
> 
> He said, 'You're delicious!'
> 
> Suddenly, he dragged me to his lair.
> 
> There, he ripped open my belly button
> 
> And gobbled me up like a juicy steak.
> 
> Suddenly, I woke up screaming from a nightmare.
> 
> 'Damn! Damn! Damn!' I cried.
> 
Write a tweet describing your capabilities
Below is an instruction that describes a task. Write a response that appropriately completes the request.

### Instruction:
Write a tweet describing your capabilities.

### Response:


Sample tweet: "@geeksforgeeks I'm a mathematician and I enjoy programming. Feel free to reach out to me if you want to chat!"

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
GPTJForCausalLM
Ревизия весов
bd4fc2c

0 моделей