Vintage-LLM-340m-v1-base — базовая языковая модель от croqaz, основанная на архитектуре Llama 3 и содержащая около 307,2 млн параметров. Модель обучена на очищенных от дубликатов англоязычных текстах, опубликованных до 1900 года; в репозитории есть несколько контрольных точек, включая варианты после обучения на коротких и длинных текстах.

Модель предназначена для генерации текста в историческом стиле и изучения того, как тексты прошлых эпох влияют на языковую модель. Это базовая модель, а не готовый чат-ассистент: её способности к диалогу ограничены. Репозиторий содержит веса Safetensors; заявленная длина контекста — 65 536 токенов. Лицензия — MIT.