/ Модель

Характеристики

Контекст
512 токенов
Параметры
385 млн
Лицензия
MIT
Архитектура
t5 · dense
Базовая модель
ruT5-large
Библиотека
transformers
Опубликована
21 окт 2024

ruT5-large-paraphraser

Генерация текстаТекст → текст4 профессии

Русскоязычная модель на базе T5 для генерации перефразировок заданного текста.

189скачиваний за 30 дней3лайкавеса обновлены27 дек 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

ruT5-large-paraphraser — русскоязычная модель генерации перефразировок на основе архитектуры T5, разработанная fyaronskiy. Она дообучена на базе ai-forever/ruT5-large на наборе ru-paraphrase-NMT-Leipzig-cleaned и предназначена для создания перефразированного варианта заданного текста. Модель содержит 385,2 млн параметров, принимает текст и генерирует текст; максимальный контекст составляет 512 токенов.

Модель подходит для перефразирования русскоязычных текстов и текстовой аугментации. Она распространяется в формате safetensors через Transformers под лицензией MIT. Качество и применимость к отдельным жанрам и предметным областям в карточке не описаны.

Сценарии применения

  • перефразирование предложений на русском языке
  • создание альтернативных формулировок для текста
  • текстовая аугментация русскоязычных данных

Ограничения

Карточка не приводит оценок качества или сведений о работе на текстах за пределами русского языка. Контекст ограничен 512 токенами.

Для каких профессий подходит4

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

This is a model for generation paraphrases for given text.

Usage

Using model with Huggingface Transformers:

import torch
from transformers import AutoTokenizer, AutoModelForSeq2SeqLM

device = torch.device("cuda" if torch.cuda.is_available() else "cpu")
model_name = "fyaronskiy/ruT5-large-paraphraser"
model = AutoModelForSeq2SeqLM.from_pretrained(model_name).to(device)
tokenizer = AutoTokenizer.from_pretrained(model_name)

def paraphrase(text, beams=5, grams=3, **kwargs):
    x = tokenizer(text, return_tensors='pt', padding=True).to(device)
    max_size = int(x.input_ids.shape[1] * 1.5)
    output = model.generate(**x, encoder_no_repeat_ngram_size=grams, num_beams=beams, \
                         max_length=max_size, do_sample = True,  **kwargs)
    
    return tokenizer.decode(output[0], skip_special_tokens=True)

paraphrase('Для оценки ситуации в данной сфере эксперты РИА Новости рассчитали соотношение среднедушевых доходов в регионах России и стоимости фиксированного набора потребительских товаров и услуг. Этот показатель позволяет сравнивать регионы по уровню доходов с учетом их покупательной способности, во многом зависящей от уровня местных цен.')
# 'Эксперты РИА Новости оценили среднедушевые доходы россиян и стоимость фиксированной потребительской корзины, а также ее покупательную способность, которая во многом зависит от уровня цен в регионе.'

paraphrase('Каждый охотник желает знать, где сидит фазан')
# 'Каждый охотник хочет знать о том, где находится фазан.'

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры
T5ForConditionalGeneration
Ревизия весов
2a2a8cd

0 моделей