Jeesup/svd-safety-l31_keep70_disc_b001 — исследовательский чекпойнт на основе Llama-3.1-8B-Instruct от Meta, сжатый методом SVD-LLM до 70,1% исходного числа параметров. Затем восстановлена часть компонентов SVD, отобранных по правилу disc, с бюджетом 0,1% параметров. Модель содержит 7,5 млрд параметров, использует архитектуру LlamaForCausalLM и формат safetensors; базовая модель поддерживает контекст до 131 072 токенов.

Чекпойнт создан для изучения того, как сжатие влияет на безопасность и полезность инструкционной языковой модели и насколько восстановление выбранных компонентов меняет эти свойства. В README приведены результаты оценок безопасности на AdvBench и StrongREJECT, а также показатель избыточных отказов на WildGuard. Это отдельный вариант в исследовательской сетке экспериментов, а не универсальный чат-ассистент.

Модель принимает текст и генерирует текст; метаданные также отмечают чат-возможности и интерфейс вызова инструментов. Данные не уточняют набор поддерживаемых языков. Модель распространяется по лицензии Llama 3.1. Ее результаты и безопасность относятся к конкретным экспериментальным оценкам и не гарантируют поведение в других сценариях.