Компактная базовая языковая модель ArzLM на 303 млн параметров для генерации текста и экспериментов с предобучением небольших моделей.

Подходит для: эксперименты с архитектурами небольших языковых моделей · исследование влияния оптимизаторов на предобучение · изучение смесей обучающих данных