/ Модель

Характеристики

Контекст
512 токенов
Параметры
38,5 млн
Архитектура
t5 · dense
Опубликована
2 мар 2022

t5-small-squad2-question-generation

Языковая модель3 профессии

Компактная англоязычная модель T5 для генерации вопросов по текстовому контексту.

294скачиваний за 30 дней46лайковвеса обновлены24 янв 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель allenai/t5-small-squad2-question-generation — компактная модель генерации вопросов на основе архитектуры T5, разработанная Allen Institute for AI и дообученная на датасете SQuAD 2.0. Она преобразует текстовый контекст в вопросы на английском языке, например для подготовки наборов вопросов по статьям или другим фрагментам текста.

Модель содержит 38,5 млн параметров, принимает и выдаёт текст и рассчитана на контекст до 512 токенов. Доступны веса в форматах PyTorch и Flax. Лицензия и сведения о качестве в предоставленных данных отсутствуют.

Сценарии применения

  • создание вопросов по фрагментам статей
  • автоматическая подготовка вопросов для учебных материалов
  • генерация вопросов по контексту для наборов данных
  • создание вопросов по текстам для викторин

Ограничения

Обучение на SQuAD 2.0 и контекстное окно до 512 токенов ограничивают применение модели этим стилем генерации и длиной входного текста. В предоставленных данных нет сведений о лицензии и оценках качества.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

A simple question-generation model built based on SQuAD 2.0 dataset. Example use:

from transformers import T5Config, T5ForConditionalGeneration, T5Tokenizer

model_name = "allenai/t5-small-squad2-question-generation"
tokenizer = T5Tokenizer.from_pretrained(model_name)
model = T5ForConditionalGeneration.from_pretrained(model_name)

def run_model(input_string, **generator_args):
    input_ids = tokenizer.encode(input_string, return_tensors="pt")
    res = model.generate(input_ids, **generator_args)
    output = tokenizer.batch_decode(res, skip_special_tokens=True)
    print(output)
    return output


run_model("shrouds herself in white and walks penitentially disguised as brotherly love through factories and parliaments; offers help, but desires power;")
run_model("He thanked all fellow bloggers and organizations that showed support.")
run_model("Races are held between April and December at the Veliefendi Hippodrome near Bakerky, 15 km (9 miles) west of Istanbul.")

which should result in the following:

['What is the name of the man who is a brotherly love?']
['What did He thank all fellow bloggers and organizations that showed support?']
['Where is the Veliefendi Hippodrome located?']

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

У модели не указана задача.

Класс архитектуры
T5ForConditionalGeneration
Ревизия весов
38443b3

0 моделей