Характеристики

Контекст: 128 токенов
Лицензия: CC BY-SA 4.0
Архитектура: gpt2 · dense
Опубликована: 20 июл 2022

Ссылки

Hugging Face

gpt2-small-greek-v2

ClassCat

Генерация текстаТекст → текст3 профессии

Небольшая грекоязычная модель GPT-2 для генерации продолжения текста.

188скачиваний за 30 дней1лайквеса обновлены23 июл 2022

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

Добавьте модель в бенчмарк
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Опишите свои задачи
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Запустите и опубликуйте
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Открыть конструктор бенчмарка

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

ClassCat/gpt2-small-greek-v2 — грекоязычная авторегрессионная языковая модель семейства GPT-2, опубликованная ClassCat. Она предназначена для генерации продолжения текста на греческом языке. Модель использует архитектуру GPT2LMHeadModel и содержит примерно вдвое меньше параметров, чем GPT-2 Base; токенизатор BPE имеет словарь размером 50 000 токенов, а контекст составляет 128 токенов.

Модель обучалась на греческих подмножествах CC-100 и OSCAR, а также на греческой Википедии. Её можно использовать для продолжения фраз и создания коротких грекоязычных текстов. Репозиторий содержит веса PyTorch и рассчитан на использование с Transformers. Лицензия — CC BY-SA 4.0.

Сценарии применения

продолжение греческих фраз и абзацев
генерация коротких текстов на греческом языке
создание вариантов грекоязычного текста по начальной подсказке

Ограничения

Контекст ограничен 128 токенами; модель обучалась на греческих текстах и не предназначена для надёжной генерации на других языках. Размер примерно вдвое меньше GPT-2 Base, что может ограничивать качество и сложность генерируемого текста.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

I.5Универсальные способностиСоздание и редактирование текстаAI помогает создавать и улучшать текстовые материалы, сохраняя смысл и требования автора.18 задач44 385моделей I.6Универсальные способностиПеревод и языковая адаптацияAI помогает переносить смысл между языками, форматами и культурными контекстами.16 задач16 710моделей I.2Универсальные способностиСинтез, понимание и проверка знанийAI помогает сжимать, сопоставлять и критически проверять знания без потери существенного контекста.18 задач42 341модель

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Greek GPT2 small model Version 2 (Uncased)

Prerequisites

transformers==4.19.2

Model architecture

This model uses approximately half the size of GPT2 base model parameters.

Tokenizer

Using BPE tokenizer with vocabulary size 50,000.

Training Data

Subset of CC-100/el : Monolingual Datasets from Web Crawl Data
Subset of oscar
wiki40b/el (Greek Wikipedia)

Usage

from transformers import pipeline
generator = pipeline('text-generation', model='ClassCat/gpt2-small-greek-v2')
generator("Αυτό είναι ένα", max_length=50, num_return_sequences=5)

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры: GPT2LMHeadModel
Ревизия весов: a6aeea8