/ Модель

Характеристики

Контекст
512 токенов
Параметры
124 млн
Лицензия
CC BY-SA 4.0
Архитектура
t5 · dense
Опубликована
2 мар 2022

t5-base-japanese-question-generation

Языковая модель3 профессии

Японская модель T5, которая генерирует вопрос по ответу и контексту с этим ответом.

230скачиваний за 30 дней3лайкавеса обновлены12 дек 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

sonoisa разработал модель на архитектуре T5 для генерации японских вопросов по ответу и контексту, содержащему этот ответ. На вход подаются ответ и соответствующий фрагмент текста в формате «answer: {ответ} content: {контекст}», на выходе модель формирует вопрос. Модель создана дообучением японской T5 на примерно половине очищенных примеров SQuAD 1.1, переведённых на японский язык.

Сценарии применения

  • составление вопросов к фрагментам японского текста по заданному ответу
  • подготовка пар вопрос–ответ для обучающих материалов
  • автоматическое создание вопросов по контексту для викторин
  • генерация вопросов для проверки понимания японского текста

Ограничения

Модель обучена на машинно переведённых и очищенных данных SQuAD 1.1, поэтому может наследовать ошибки перевода и ограниченность этого набора данных. Максимальная длина входа составляет 512 токенов, а выхода — 64 токена.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

回答と回答が出てくるパラグラフを与えると質問文を生成するモデル

SEE: https://github.com/sonoisa/deep-question-generation

本モデルの作成ステップ概要

  1. SQuAD 1.1を日本語に機械翻訳し、不正なデータをクレンジング(有効なデータは約半分)。
    回答が含まれるコンテキスト、質問文、解答の3つ組ができる。
  2. 日本語T5モデルを次の設定でファインチューニング
  • 入力: "answer: {解答} content: {回答が含まれるコンテキスト}"
  • 出力: "{質問文}"
  • 各種ハイパーパラメータ
    • 最大入力トークン数: 512
    • 最大出力トークン数: 64
    • 最適化アルゴリズム: AdaFactor
    • 学習率: 0.001(固定)
    • バッチサイズ: 128
    • ステップ数: 2500(500ステップごとにチェックポイントを出力、定量・定性評価を行い2500ステップ目を採用)

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

У модели не указана задача.

Класс архитектуры
T5ForConditionalGeneration
Ревизия весов
4fdc568

0 моделей