Характеристики

Контекст: 131 072 токена
Параметры: 7,5 млрд
Размер весов: 16,1 ГБ
Лицензия: Llama 3.1
Архитектура: llama · dense
Базовая модель: tofu_Llama-3.1-8B-Instruct_full
Библиотека: transformers
Опубликована: 10 сен 2026

Ссылки

tofu_Llama-3.1-8B-Instruct_forget10_SimNPO

Генерация текстаТекст → текст3 профессии

Экспериментальная Llama 3.1 8B, дообученная SimNPO для забывания примеров forget10 из набора TOFU и исследований машинного забывания.

32скачиваний за 30 дней0лайковвеса обновлены10 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

Добавьте модель в бенчмарк
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Опишите свои задачи
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Запустите и опубликуйте
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Открыть конструктор бенчмарка

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

JoaoBoer опубликовал эту плотную авторегрессионную модель семейства Llama 3.1 с 7,5 млрд параметров, созданную на основе open-unlearning/tofu_Llama-3.1-8B-Instruct_full. Модель дообучена методом SimNPO на части forget10 набора TOFU для целенаправленного забывания данных; автор описывает её как базовый вариант с изменёнными весами для проекта Speculative-Decoding-Unlearning.

Модель принимает текст и генерирует текст в диалоговом формате. Её используют для экспериментов по машинному забыванию и оценки того, как такое дообучение влияет на запоминание и извлечение ответов. Указано контекстное окно до 131 072 токенов; репозиторий содержит веса в формате Safetensors и рассчитан на Transformers.

В README приведены метрики оценки на TOFU, включая exact_memorization 0,5422, extraction_strength 0,0551 и forget_Q_A_PARA_Prob 0,0356. Это экспериментальный чекпойнт для исследований unlearning, а не универсальная замена исходной Llama. Лицензия — Llama 3.1; применяются условия лицензии Meta Llama 3.1.

Сценарии применения

эксперименты по машинному забыванию данных в языковых моделях
оценка забывания ответов на вопросы о примерах набора TOFU
сравнение методов unlearning на модели Llama 3.1 8B
исследование влияния изменения весов на запоминание и извлечение данных

Ограничения

Модель предназначена для экспериментальной оценки забывания на наборе TOFU; приведённые метрики относятся к этой оценке и сами по себе не подтверждают качество на других задачах. Для использования действуют условия лицензии Meta Llama 3.1.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

II.10Разработка и данныеРазработка и эксплуатация AI/ML-системAI помогает создавать, оценивать, развёртывать и контролировать AI/ML-системы на всём жизненном цикле.30 задач49 000моделей II.11Разработка и данныеКибербезопасность и приватностьAI помогает обнаруживать киберугрозы, защищать данные и помогать реагировать на инциденты.25 задач4 232модели II.9Разработка и данныеСтатистика, эксперименты и причинный анализAI помогает планировать эксперименты и делать статистически обоснованные выводы о связях и эффектах.18 задач2 881модель

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

tofu_Llama-3.1-8B-Instruct_forget10_SimNPO

open-unlearning/tofu_Llama-3.1-8B-Instruct_full unlearned on the TOFU forget10 split with SimNPO, trained with the open-unlearning framework. Used as a weight-unlearning baseline / draft model in the Speculative-Decoding-Unlearning project.

Full training config: .hydra/config.yaml. TOFU evaluation outputs: evals/.

Method hyperparameters

gamma: 0.125
alpha: 1
retain_loss_type: NLL
delta: 1
beta: 3.5

TOFU summary metrics

metric	value
exact_memorization	0.5422
extraction_strength	0.0551
forget_Q_A_PARA_Prob	0.0356
forget_Q_A_gibberish	0.7385
forget_quality	0.4158
forget_truth_ratio	0.6639
mia_loss	0.1633
mia_min_k	0.1514
mia_min_k_plus_plus	0.0794
mia_zlib	0.1692
model_utility	0.4661
privleak	36.9003

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры: LlamaForCausalLM
Ревизия весов: 13f7ded

Характеристики

Ссылки

tofu_Llama-3.1-8B-Instruct_forget10_SimNPO

Бенчмарки

Тесты пользователейпока нет

Добавьте модель в бенчмарк

Опишите свои задачи

Запустите и опубликуйте

Публичные оценки

Что умеет модель

Сценарии применения

Ограничения

Для каких профессий подходит3

Карточка модели

tofu_Llama-3.1-8B-Instruct_forget10_SimNPO

Method hyperparameters

TOFU summary metrics

Как запустить