arrow
返回

Towards Patch-Based Noise Compression for Adversarial Attack Against Transformer-Based Visual Tracking

delete2026-01-01
delete0
PRE
AI
高鹏 (Peng Gao)
L
Long Xu
W
Wen-Jia Tang
F
Fei Wang
H
Hamido Fujita
H
Hanan Aljuaid
R
Ru-Yue Yuan
DOI:10.1109/TIFS.2025.3648551delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
近年来,随着Vision Transformer (ViT)在视觉跟踪器中的广泛应用,其鲁棒性日益受到关注。然而,ViT通过关注图像块之间的全局交互,降低了其对局部噪声的敏感性,给对抗性攻击带来了新的挑战。与此同时,现有的基于决策的对抗性攻击方法往往忽略了不同块之间噪声敏感度的差异,进一步限制了对抗性噪声的压缩效率,尤其是在ViT中。在视觉跟踪领域,现有的对抗性攻击方法主要针对基于孪生网络的跟踪器,而对基于Transformer的跟踪器的对抗性攻击研究,尤其是基于决策的黑盒攻击,仍相对有限。为对基于Transformer的跟踪器实施有效的黑盒攻击,本文创新性地提出了基于块的对抗噪声压缩(PANC)方法,这是一种基于决策的对抗性攻击方法。该方法能够逐块有效地压缩对抗噪声,显著提高了压缩效率和攻击隐蔽性。PANC还引入了一个噪声敏感度矩阵,通过动态增减对抗噪声,优化噪声的空间分布并减少查询次数。我们在包括OSTrack、STARK、TransT和MixformerV2在内的多个基于Transformer的跟踪器以及GOT-10k、TrackingNet和LaSOT三个公开的大规模基准数据集上验证了所提PANC攻击方法的有效性。实验结果表明,与现有的最先进的对抗性攻击方法IoU攻击相比,PANC将噪声水平压缩至10%,在查询次数仅为45.7%的情况下,攻击有效性提升了162%。此外,PANC可作为其他对抗性攻击方法的初始化或后处理优化策略,为对抗样本生成提供更灵活高效的机制。我们的工作揭示了现有基于Transformer的视觉跟踪器的脆弱性,并为进一步提升对抗性攻击的效率和隐蔽性提供了新思路。
Keyword:
Adversarial attack
black-box attack
visual tracking
vision transformer
noise compression

期刊

IEEE Transactions on Information Forensics and Security 封面图
IEEE Transactions on Information Forensics and Security
IF:
8
论文数:
5.2K
被引数:
2.3W

机构

U
University Teknologi Malaysia
学者数:
2
论文数: 2
被引数: 0
H
harbin institute of technology shenzhen
学者数:
11
论文数: 5
被引数: 0
P
princess nourah bint abdulrahman university
学者数:
991
论文数: 1.1K
被引数: 0
Q
Qufu Normal University
学者数:
7.8K
论文数: 5.8K
被引数: 5.4K
J
jining, shandong, china
学者数:
1
论文数: 1
被引数: 0
学者 查看更多机构
引用论文

引用论文

AiATrack: Attention in Attention for Transformer Visual Tracking
err2022-10-23
err0
PREAI
errShenyuan Gao; Chunluan Zhou; Chao Ma; Xinggang Wang; Junsong Yuan
err分享
err收藏
err
IF0
err
err0
errOAAI
err
err分享
err收藏
err分享
err收藏
One-Shot Adversarial Attacks on Visual Tracking With Dual Attention
err2020-06-01
err0
PREAI
errXuesong Chen; Xiyu Yan; Feng Zheng; Yong Jiang; Shu-Tao Xia; Yong Zhao; Rongrong Ji
err分享
err收藏
Autoregressive Visual Tracking
err2023-06-01
err0
PREAI
errXing Wei; Yifan Bai; Yongchao Zheng; Dahu Shi; Yihong Gong
err分享
err收藏
Robust Tracking Against Adversarial Attacks
err2020-11-13
err0
PREAI
errShuai Jia; Chao Ma; Yibing Song; Xiaokang Yang
err分享
err收藏
Procontext: Exploring Progressive Context Transformer for Tracking
err2023-06-04
err0
errOAAI
errJin-Peng Lan; Zhi-Qi Cheng; Jun-Yan He; Chenyang Li; Bin Luo; Xu Bao; Wangmeng Xiang; Yifeng Geng; Xuansong Xie
err分享
err收藏
End-to-End Object Detection with Transformers使用Transformers进行端到端对象检测
err2020-11-03
err0
PREAI
errNicolas Carion; Francisco Massa; Gabriel Synnaeve; Nicolas Usunier; Alexander Kirillov; Sergey Zagoruyko
err分享
err收藏
err分享
err收藏
Transforming Model Prediction for Tracking
err2022-06-01
err0
errOAAI
errChristoph Mayer; Martin Danelljan; Goutam Bhat; Matthieu Paul; Danda Pani Paudel; Fisher Yu; Luc Van Gool
err分享
err收藏
学者 查看更多内容