arrow
返回

Detecting Deceptive Behavior via Learning Relation-Aware Visual Representations

delete2025-01-01
delete0
PRE
AI
D
Dongliang Zhu
C
Chi Zhang
胡瑞敏 封面图
胡瑞敏 (Ruimin Hu)
M
Mei Wang
L
Liang Liao
Mang Ye 封面图
Mang Ye (Mang Ye)
DOI:10.1109/TIFS.2025.3586468delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
随着数字媒体的快速发展和广泛应用,欺骗行为引发了诸多伦理和安全问题,使得欺骗检测技术的研究与进步尤为重要。大多数以往的自动化欺骗检测方法主要关注视觉情境中的面部信息。然而,从心理学角度来看,欺骗行为不仅体现在面部表情的变化,还可能通过肢体行为以及身体各部分的细微不协调表现出来。受此不一致性启发,本文尝试对肢体行为及其关系进行建模以用于欺骗检测。值得注意的是,一些主流的视频理解方法虽然能大致建模头部和肢体信息,但其整体视频输入方式易受背景干扰影响。这限制了其聚焦于反映欺骗的关键身体区域和细微运动线索的能力,从而制约了检测性能。为解决上述挑战,本文提出了一种动态学习框架,利用肢体部分关系感知建模(DLF-BRAM)。在该框架内,我们对头部和肢体区域进行分割和建模,以减少无关背景干扰并提升特征学习的准确性。该框架包含两个主要组件:头部-肢体关系感知表示(HLRAR)模块和动态评估学习策略(DALS)。HLRAR模块揭示了头部、肢体及其交互的时空关系,并学习各线索的深度特征表示,从而突出这些线索的独特性。DALS在训练过程中评估三种时空关系的有效学习情况,并动态调整其学习权重,防止任何单一分支主导学习过程,促进平衡学习。广泛的基准和消融实验表明,我们的方法优于大多数现有方法,验证了其有效性。
Keyword:
Automated deception detection
human behavior understanding
deep learning

期刊

IEEE Transactions on Information Forensics and Security 封面图
IEEE Transactions on Information Forensics and Security
IF:
8
论文数:
5.3K
被引数:
2.3W

机构

X
Xidian University
学者数:
2.4W
论文数: 1.9W
被引数: 9.7K
W
wuhan university
学者数:
8.1W
论文数: 5.8W
被引数: 70
引用论文

引用论文

Deep Face Recognition深度人脸识别
err2015-01-01
err0
PREAI
errOmkar M. Parkhi; Andrea Vedaldi; Andrew Zisserman
err分享
err收藏
err
IF0
err
err0
errOAAI
err
err分享
err收藏
Micron-BERT: BERT-Based Facial Micro-Expression Recognition
err2023-06-01
err0
errOAAI
errXuan-Bac Nguyen; Chi Nhan Duong; Xin Li; Susan Gauch; Han-Seok Seo; Khoa Luu
err分享
err收藏
Multimodal Deception Detection Using Real-Life Trial Data
err2022-01-01
err22
PREAI
errSen, M. Umut; Perez-Rosas, Veronica; Yanikoglu, Berrin; Abouelenien, Mohamed; Burzo, Mihai; Mihalcea, Rada
err分享
err收藏
err分享
err收藏
VideoMAE V2: Scaling Video Masked Autoencoders with Dual Masking
err2023-06-01
err0
errOAAI
errLimin Wang; Bingkun Huang; Zhiyu Zhao; Zhan Tong; Yinan He; Yi Wang; Yali Wang; Yu Qiao
err分享
err收藏
学者 查看更多内容