/ Модель

Характеристики

Параметры
184 млн
Архитектура
t5 · dense
Опубликована
3 дек 2023

octopus

Языковая модель3 профессии

Octopus — модель на базе T5 для генерации и преобразования текстов на арабском языке, включая исправление ошибок, перефразирование и работу с вопросами.

30скачиваний за 30 дней1лайквеса обновлены4 дек 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Octopus — набор моделей и инструментов на основе архитектуры T5 для генерации текстов на арабском языке, описанный авторами в статье OCTOPUS: A Multitask Model and Toolkit for Arabic Natural Language Generation. Модель содержит 183,7 млн параметров и распространяется в формате PyTorch.

Octopus предназначен для нескольких задач генерации и преобразования арабского текста: расстановки диакритических знаков, исправления грамматических ошибок, создания новостных заголовков, перефразирования, ответов на вопросы, генерации вопросов и транслитерации. Репозиторий также включает Python-библиотеку и интерфейс командной строки.

В карточке не указаны лицензия и отдельные условия использования, поэтому их нельзя определить по доступным данным. README перечисляет семь задач, хотя заявляет о восьми; качество и ограничения модели отдельно не описаны.

Сценарии применения

  • расстановка диакритических знаков в арабском тексте
  • исправление грамматических ошибок в арабском языке
  • создание заголовков для новостных статей на арабском
  • перефразирование арабского текста
  • ответы на вопросы по арабскому тексту
  • генерация вопросов на арабском языке
  • транслитерация арабского текста

Ограничения

README заявляет о восьми задачах, но перечисляет семь. Качество, контекстное окно и лицензия в предоставленных данных не описаны.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Octopus is a neural machine generation toolkit for Arabic Natural Lnagauge Generation (NLG) that described in our ArabiNLP 2023 paper: OCTOPUS: A Multitask Model and Toolkit for Arabic Natural Language Generation.

Octopus designed for eight machine generation tasks, encompassing diacritization, grammatical error correction, news headlines generation, paraphrasing, question answering, question generation, and transliteration. This comprehensive package includes a Python library along with associated command-line scripts.

Github: https://github.com/UBC-NLP/octopus

Demo: https://demos.dlnlp.ai/octopus

Paper: https://arxiv.org/abs/2206.03933

License

octopus(-py) is Apache-2.0 licensed. The license applies to the pre-trained models as well.

Citation

If you use TURJUMAN toolkit or the pre-trained models for your scientific publication, or if you find the resources in this repository useful, please cite our paper as follows (to be updated):

 @misc{elmadany2023octopus,
      title={Octopus: A Multitask Model and Toolkit for Arabic Natural Language Generation}, 
      author={AbdelRahim Elmadany and El Moatez Billah Nagoudi and Muhammad Abdul-Mageed},
      year={2023},
      eprint={2310.16127},
      archivePrefix={arXiv},
      primaryClass={cs.CL}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

У модели не указана задача.

Класс архитектуры
T5ForConditionalGeneration
Ревизия весов
0b0bd07

0 моделей