Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
Модель nikitastheo/v5-babylm-15k-eng-ell-sequential_interleaved — авторский причинный языковой GPT‑2 чекпойнт, обученный с помощью скрипта train_clm.py и Hugging Face Accelerate без Trainer. Она предназначена для генерации продолжения текста и языковых экспериментов. Модель принимает текст и выдаёт текст; её контекст составляет 512 токенов, веса опубликованы в формате Safetensors и используются через Transformers.
Название указывает на обучение в рамках BabyLM на последовательных чередующихся данных английского и греческого языков; это следует считать характеристикой из имени, поскольку README не приводит подробностей о данных или результатах. В метаданных нет сведений о размере модели и лицензии, поэтому условия повторного использования по карточке установить нельзя.
Сценарии применения
генерация продолжения английского текста
генерация продолжения греческого текста
эксперименты с небольшим языковым корпусом
исследование чередования языков в обучающих данных
Ограничения
Контекст ограничен 512 токенами. README не описывает метрики качества, обучающие данные и лицензию; предполагаемую англо-греческую направленность можно вывести только из названия модели.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель