arrow
返回

Frame-Level Temporal Difference Learning for Partial Deepfake Speech Detection

delete2025-01-01
delete0
PRE
AI
M
Menglu Li
张
张晓平 (Xiaoping Zhang)
L
Lian Zhao
DOI:10.1109/LSP.2025.3592111delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
检测部分深度伪造语音至关重要,因其具有潜在的不明显误导性。然而,现有方法在训练时依赖成本高昂的帧级标注,限制了实际可扩展性。此外,它们主要关注检测真实语音与深度伪造片段之间的过渡伪影。随着深度伪造生成技术的不断发展,这些过渡逐渐平滑,检测难度日益增加。为解决此问题,本研究通过分析帧级时间差异引入了新视角,并发现与真实语音相比,深度伪造语音表现出方向性变化不稳定且局部过渡不自然。基于此发现,我们提出了一种时间差注意力模块(TDAM),将部分深度伪造检测重新定义为识别不自然的时间变化,而无需依赖明确的边界标注。一种双级分层差异表示能够捕捉细粒度和粗粒度尺度上的时间不规则性,同时自适应平均池化(adaptive average pooling)可保留跨变长输入的关键模式,以最小化信息损失。我们的TDAM-AvgPool模型实现了当前最佳性能,在PartialSpoof数据集上的等错误率(EER)为0.59%,在HAD数据集上为0.03%,显著优于现有方法,且无需帧级监督。
Keyword:
Deepfake speech detection
partial speech deepfake
anti-spoofing

期刊

IEEE Signal Processing Magazine 封面图
IEEE Signal Processing Magazine
IF:
9.6
论文数:
1.1W
被引数:
1.7W

机构

T
Toronto Metropolitan University
学者数:
6.0K
论文数: 7.0K
被引数: 6.4K
T
tsinghua university
学者数:
11.9W
论文数: 10.0W
被引数: 137
引用论文

引用论文

err分享
err收藏
err
IF0
err
err0
PREAI
err
err分享
err收藏
err分享
err收藏
ASVspoof 2021: Towards Spoofed and Deepfake Speech Detection in the Wild
err2023-01-01
err42
errOAAI
errLiu, Xuechen; Wang, Xin; Sahidullah, Md; Patino, Jose; Delgado, Hector; Kinnunen, Tomi; Todisco, Massimiliano; Yamagishi, Junichi; Evans, Nicholas; Nautsch, Andreas; Lee, Kong Aik
err分享
err收藏
err分享
err收藏
Frame-to-Utterance Convergence: A Spectra-Temporal Approach for Unified Spoofing Detection
err
IF0
err2024-04-14
err0
PREAI
errAwais Khan; Khalid Mahmood Malik; Shah Nawaz
err分享
err收藏
AASIST: Audio Anti-Spoofing Using Integrated Spectro-Temporal Graph Attention Networks
err2022-05-23
err0
errOAAI
errJee-weon Jung; Hee-Soo Heo; Hemlata Tak; Hye-jin Shim; Joon Son Chung; Bong-Jin Lee; Ha-Jin Yu; Nicholas Evans
err分享
err收藏
学者 查看更多内容