/ Модель

Характеристики

Контекст
512 токенов
Параметры
124 млн
Лицензия
Apache 2.0
Архитектура
t5 · dense
Опубликована
12 окт 2023

t5-base-grammar-synthesis

Генерация текстаТекст → текст3 профессии

Модель T5, дообученная на JFLEG для исправления грамматики, пунктуации и опечаток в английских предложениях.

27скачиваний за 30 дней1лайквеса обновлены23 окт 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Sajid030/t5-base-grammar-synthesis — модель семейства T5, дообученная автором на базе предварительно обученной Flan-T5-base с использованием набора JFLEG и библиотеки Happy Transformer. Она исправляет грамматические ошибки в предложениях на английском языке, включая ошибки пунктуации, опечатки и неверное употребление предлогов.

Модель принимает текст с префиксом «grammar:» и генерирует исправленный вариант. Архитектура — T5ForConditionalGeneration, размер — 123,7 млн параметров, длина контекста — 512 токенов. Репозиторий содержит веса в форматах PyTorch и safetensors; лицензия — Apache-2.0.

Сценарии применения

  • исправление грамматических ошибок в английских предложениях
  • корректировка пунктуации в англоязычном тексте
  • исправление опечаток и ошибок в предлогах
  • вычитка коротких англоязычных текстов

Ограничения

Контекст ограничен 512 токенами; назначение модели — коррекция английских предложений, поэтому качество для других языков и длинных документов не подтверждено.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Model

This model utilizes the Flan-T5-base pre-trained model and has been fine-tuned using the JFLEG dataset with the assistance of the Happy Transformer framework. Its primary objective is to correct a wide range of potential grammatical errors that sentences might contain including issues with punctuation, typos, prepositions, and more.

Usage with Transformers

from transformers import AutoTokenizer, AutoModelForSeq2SeqLM

tokenizer = AutoTokenizer.from_pretrained("Sajid030/t5-base-grammar-synthesis")
model = AutoModelForSeq2SeqLM.from_pretrained("Sajid030/t5-base-grammar-synthesis")

text = "One person if do n't have good health that means so many things they could lost ."
inputs = tokenizer("grammar:"+text, truncation=True, return_tensors='pt')

output = model.generate(inputs['input_ids'])
correction=tokenizer.batch_decode(output, skip_special_tokens=True)
print("".join(correction)) #Correction: If one person doesn't have good health, so many things could be lost.

Usage with HappyTransformers

from happytransformer import HappyTextToText, TTSettings
happy_tt = HappyTextToText("T5", "Sajid030/t5-base-grammar-synthesis")
args = TTSettings()

sentence = "Much many brands and sellers still in the market."
result = happy_tt.generate_text("grammar: "+ sentence, args=args)

print(result.text) # Many brands and sellers are still in the market.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
T5ForConditionalGeneration
Ревизия весов
38f6dbb

0 моделей