llama-2-7b-trained-contract-32k

На странице модели нет собственной карточки с подробным описанием, поэтому сведения о конкретном дообучении ограничены названием и техническими метаданными репозитория. Модель предназначена для генерации текста и может применяться к задачам продолжения, обработки и адаптации естественно-языковых текстов, включая потенциальную работу с длинными контрактами или другими документами.

Базовая Llama 2 7B — авторегрессионная модель на оптимизированной Transformer-архитектуре примерно с 7 млрд параметров, принимающая и генерирующая только текст. Для исходной модели Meta указывает контекст 4K токенов, английскую ориентацию и лицензию Llama 2 Community License. Суффикс 32k указывает на заявленную адаптацию к контексту до 32K токенов, однако точный способ расширения контекста, фактические характеристики, языки, качество на юридических задачах и данные обучения этой версии не подтверждены карточкой модели.

Сильной стороной предположительно является возможность обрабатывать более длинные документы по сравнению с базовой Llama 2 7B. Ограничения включают отсутствие документированных тестов, сведений о безопасности, точности и методе дообучения; результаты не следует считать юридической консультацией. Условия использования производной версии отдельно не указаны, поэтому необходимо учитывать применимую лицензию базовой Llama 2 и проверить наличие дополнительных условий автора репозитория.