Англоязычная маскированная модель на основе DeBERTa-v2 для исследований языкового понимания и предварительного обучения на малых объёмах данных.

Подходит для: оценка предсказания замаскированных слов · исследование обучения языковых моделей на малых корпусах · оценка языковых знаний в заданиях BabyLM