/ Модель

Характеристики

Лицензия
CC BY 4.0
Опубликована
6 сен 2026

NFA-ViT

Сегментация изображенийИзображение → mask

NFA-ViT анализирует изображение и выделяет на нём области, вероятно созданные ИИ или подвергшиеся подделке.

0скачиваний за 30 дней0лайковвеса обновлены6 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

NFA-ViT (Noise-guided Forgery Amplification Vision Transformer) — модель для локализованного обнаружения изображений, созданных ИИ, и подделок. Она представлена в работе AAAI 2026 и разработана исследователями из Сямэньского университета и лаборатории Youtu компании Tencent; в этом репозитории опубликована неофициальная повторная загрузка весов.

Модель принимает изображение и формирует сегментационную карту участков, подозрительных на генеративное происхождение или подделку. Архитектура объединяет извлекатель шумовых признаков на основе DnCNN, backbone SegFormer-B2 для изображения и SegFormer-B0 для шума. Доступны начальные веса компонентов и полные веса NFA-ViT, дообученные на наборе BR-Gen.

Модель предназначена для анализа и локализации манипуляций на изображениях, в том числе в исследовательских и криминалистических сценариях. Метаданные указывают формат PyTorch и английский язык карточки. Веса распространяются по лицензии CC BY 4.0. Качество зависит от типа изображений и соответствия данных набору BR-Gen; README не приводит количественных оценок качества.

Сценарии применения

  • локализация областей ИИ-генерации на изображении
  • поиск подделанных участков фотографии
  • анализ изображений на признаки генеративных манипуляций
  • исследование методов обнаружения подделок

Ограничения

README не приводит численных метрик качества. Модель обучалась на BR-Gen, поэтому её точность на изображениях и типах манипуляций, отличающихся от этого набора, может быть ниже.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

NFA-ViT Pretrained Weights (Re-upload)

This repository contains the re-uploaded pretrained weights for NFA-ViT (Noise-guided Forgery Amplification Vision Transformer), introduced in the AAAI 2026 paper "Zooming In on Fakes: A Novel Dataset for Localized AI-Generated Image Detection with Forgery Amplification Approach".

This is NOT an officianl re-upload. The original weights were previously available only via Baidu Netdisk, that requires a Chinese phone number to create an account. Re-uppload distibuted under the original CC BY 4.0 license.

Model Weights

The initial weights of NFA-ViT consist of three parts:

File NameDescription
noiseprint.pthDnCNN-based noise extractor weights
segformer_b2_backbone_weights.pthImage backbone (SegFormer-B2)
segformer_b0_backbone_weights.pthNoise backbone (SegFormer-B0)

Full NFA-ViT training weights fine-tuned on the BR-Gen dataset also provided.

Citation

If you use these weights, please cite the original paper using this BibTeX:

@article{cai2025zooming,
  title={Zooming In on Fakes: A Novel Dataset for Localized AI-Generated Image Detection with Forgery Amplification Approach},
  author={Cai, Lvpan and Wang, Haowei and Ji, Jiayi and ZhouMen, YanShu and Ma, Yiwei and Sun, Xiaoshuai and Cao, Liujuan and Ji, Rongrong},
  journal={Proceedings of the the AAAI Conference on Artificial Intelligence (AAAI)},
  year={2026}
}

Original Resources

Acknowledgments & Credits

Original Authors

The model and dataset were developed by:

Lvpan Cai, Haowei Wang, Jiayi Ji, Yanshu Zhoumen, Shen Chen, Taiping Yao, Xiaoshuai Sun (Key Laboratory of Multimedia Trusted Perception and Efficient Computing, Xiamen University & Youtu Lab, Tencent)

Re-upload Credits

This re-upload was made possible thanks to Yuri The Romantic Dev (@the-romantic-dev, Linkedin), who discovered the paper and successfully retrieved the original weights from Baidu Netdisk, making them accessible to the international research community.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

В репозитории нет config.json: не понять архитектуру модели.

Ревизия весов
cbc9383

0 моделей