Congretimbau — модель BERT, разработанная Belisards путём продолжения обучения BERTimbau Base на текстах законопроектов Бразилии. Она предназначена для предсказания замаскированных токенов в текстах на бразильском португальском и может использоваться для анализа и подготовки текстовых представлений законодательных документов. Данные для обучения получены из Палаты депутатов и Федерального сената Бразилии; карточка сообщает значение eval_loss 0,4885 после 10 000 шагов обучения.

Модель основана на архитектуре BERT с головой masked language modeling, содержит 433,2 млн параметров и поддерживает контекст до 512 токенов. Распространяется в формате Safetensors через Transformers по лицензии MIT. Специализация на законодательных текстах Бразилии ограничивает применимость за пределами этой области; приведённая метрика оценки сама по себе не подтверждает качество на прикладных задачах.