BERT, дополнительно предобученный на образовательных текстах K–12 для заполнения маскированных слов и получения текстовых представлений.

Подходит для: предсказание пропущенных слов в школьных учебных материалах · получение контекстных представлений образовательных текстов · адаптация NLP-систем к школьной образовательной лексике