arrow
返回

Learning Knowledge-Based Prompts for Robust 3D Mask Presentation Attack Detection

delete2025-10-06
delete0
PRE
AI
F
Fangling Jiang
李
李琦 (Qi Li)
B
Bing Liu
王
王卫宁 (Weining Wang)
C
Caifeng Shan
Zhenan Sun 封面图
Zhenan Sun (Zhenan Sun)
M
Ming–Hsuan Yang
DOI:10.1109/TPAMI.2025.3618630delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
3D面具呈现攻击检测对于保护人脸识别系统免受日益增长的3D面具攻击威胁至关重要。尽管大多数现有方法利用多模态特征或远程光电容积脉搏波(rPPG)信号来区分真实人脸和3D面具,但它们面临着高昂的多模态传感器成本和有限的泛化能力等显著挑战。与检测相关的文本描述提供简洁、通用的信息,且获取成本低廉。然而,视觉-语言多模态特征在3D面具呈现攻击检测方面的潜力尚未被探索。在本文中,我们提出了一种新颖的知识引导提示学习框架,以探索视觉-语言模型在3D面具呈现攻击检测中的强泛化能力。具体而言,我们的方法将知识图谱中的实体和三元组整合到提示学习过程中,生成精细的、任务特定的显式提示,从而有效利用预训练视觉-语言模型中嵌入的知识。此外,考虑到不同的输入图像可能强调不同的知识图谱元素,我们引入了一种基于注意力机制的视觉特定知识过滤器,以根据视觉上下文细化相关元素。另外,我们借鉴因果图理论的见解,进一步增强了提示学习过程的泛化能力。在训练过程中,采用一种去除虚假关联的范式,利用知识引导的文本特征去除类别无关的局部图像块,促进与类别相关的局部图像块对齐的泛化因果提示的学习。实验结果表明,所提出的方法在基准数据集上达到了当前最先进的跨场景和同场景检测性能。
Keyword:
3D mask detection
face presentation attack detection
face anti-spoofing
prompt learning

期刊

IEEE Transactions on Pattern Analysis and Machine Intelligence 封面图
IEEE Transactions on Pattern Analysis and Machine Intelligence
IF:
18.6
论文数:
1.1K
被引数:
9.8W

机构

M
mais casia
学者数:
3
论文数: 1
被引数: 0
N
Nanjing University
学者数:
7.0K
论文数: 2.6K
被引数: 8.1W
U
University of California Merced
学者数:
2.3K
论文数: 1.9K
被引数: 2
U
University of South China
学者数:
4.3K
论文数: 1.2K
被引数: 1.0W
学者 查看更多机构
引用论文

引用论文

Generalized Face Anti-Spoofing via Finer Domain Partition and Disentangling Liveness-Irrelevant Factors
err
IF0
err2024-10-16
err0
PREAI
errJingyi Yang; Zitong Yu; Xiuming Ni; Jia He; Hui Li
err分享
err收藏
CASIA-SURF: A Large-Scale Multi-Modal Benchmark for Face Anti-Spoofing
err2020-04-01
err0
errOAAI
errShifeng Zhang; Ajian Liu; Jun Wan; Yanyan Liang; Guodong Guo; Sergio Escalera; Hugo Jair Escalante; Stan Z. Li
err分享
err收藏
Generalized face anti-spoofing by detecting pulse from face videos
err2016-12-01
err0
errOAAI
errXiaobai Li; Jukka Komulainen; Guoying Zhao; Pong-Chi Yuen; Matti Pietikainen
err分享
err收藏
学者 查看更多内容