Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
Модель nikitastheo/phonebabylm-text-deu-eng-sequential_interleaved — авторегрессионная языковая модель семейства GPT-2, обученная разработчиком с помощью скрипта train_clm.py из Hugging Face Accelerate. Она предназначена для генерации текста; по названию репозитория модель связана с немецким и английским языками, обученными в последовательном чередовании. Модель принимает текст и продолжает его.
Контекст составляет 512 токенов, архитектура — GPT2LMHeadModel, веса представлены в формате safetensors. Размер модели и условия лицензии в доступных сведениях не раскрыты.
Сценарии применения
продолжение немецкого текста
продолжение английского текста
генерация коротких текстовых фрагментов
эксперименты с чередующимся обучением языковой модели
Ограничения
Контекст ограничен 512 токенами. Карточка не сообщает размер модели и лицензию; её пригодность и качество для конкретных сценариев не подтверждены приведёнными сведениями.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель