JoaoBoer/tofu_Llama-3.2-3B-Instruct_forget10_WGA — дообученная версия open-unlearning/tofu_Llama-3.2-3B-Instruct_full, созданная для экспериментов по машинному забыванию данных. Модель обучена методом WGA на разбиении forget10 набора TOFU с использованием фреймворка open-unlearning и служит базовым вариантом weight-unlearning и черновой моделью в проекте Speculative-Decoding-Unlearning.

Это плотная авторегрессионная модель семейства Llama 3.2 с 3,2 млрд параметров. Она принимает текст и генерирует текст; в метаданных заявлены контекст до 131 072 токенов и интерфейс чата. README приводит метрики оценки на TOFU: exact_memorization 0,0272, extraction_strength 0,0325 и forget_Q_A_PARA_Prob 0,0004.

Модель предназначена прежде всего для исследований и сравнения методов unlearning на TOFU, а не для универсального применения. Карточка не описывает поддерживаемые естественные языки. Лицензия указана как llama3.2; применяются условия лицензии Llama 3.2.