/ Модель

Характеристики

Контекст
512 токенов
Лицензия
Apache 2.0
Архитектура
encoder-decoder · dense
Опубликована
2 мар 2022

bert2bert-base-arxiv-titlegen

СуммаризацияТекст → текст3 профессии

Модель генерирует английские заголовки статей по компьютерным наукам на arXiv по их аннотациям.

220скачиваний за 30 дней13лайковвеса обновлены26 апр 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Callidior разработал Paper Title Generator — модель encoder-decoder на основе BERT2BERT, дообученную для создания заголовков научных статей по их аннотациям. Энкодер и декодер инициализированы официальным чекпойнтом bert-base-uncased. Модель обучалась на 318 500 статьях по компьютерным наукам с arXiv.org, опубликованных с 2007 по 2022 год.

Основной сценарий — предложить заголовок для статьи по её аннотации. На отложенной валидационной выборке автор сообщает результат 26,3% по метрике ROUGE-2 F1. Модель принимает английский текст и генерирует английский заголовок; для других областей и языков её пригодность не подтверждена. Распространяется по лицензии Apache-2.0.

Сценарии применения

  • генерация заголовка научной статьи по аннотации
  • подготовка вариантов названия для статьи по компьютерным наукам
  • автоматическое предложение заголовка для препринта на arXiv

Ограничения

Оценка 26,3% ROUGE-2 F1 получена на отложенной выборке; качество заголовков для других областей и языков не подтверждено. Модель обучена на материалах arXiv по компьютерным наукам за 2007–2022 годы.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Paper Title Generator

Generates titles for computer science papers given an abstract.

The model is a BERT2BERT Encoder-Decoder using the official bert-base-uncased checkpoint as initialization for the encoder and decoder. It was fine-tuned on 318,500 computer science papers posted on arXiv.org between 2007 and 2022 and achieved a 26.3% Rouge2 F1-Score on held-out validation data.

Live Demo: https://paper-titles.ey.r.appspot.com/

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
EncoderDecoderModel
Ревизия весов
3c679de

0 моделей