arrow
返回

Hierarchical motion magnification

delete2025-07-07
delete0
PRE
AI
J
Jasdeep Singh
S
Santosh Kumar Vipparthi
S
Subrahmanyam Murala
G
G. Sankara Raju Kosuru
H
Hasan Al-Marzouqi
DOI:10.1016/j.neucom.2025.130869delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
视频运动放大技术能够放大微小且难以察觉的变化,使其变得可感知。它具有广泛的应用,例如测量呼吸信号、分类微表情、远程测量微位移等。此外,其应用范围仍在持续扩展。现有的手工设计技术提供的解决方案效果较差,通常放大倍数较低,并且需要选择随视频变化的复杂超参数值。为了解决这些问题,基于深度学习的方法被引入。然而,它们在运动放大过程中对噪声相关的失真敏感。为应对这些挑战,我们提出了一种更具鲁棒性的分层网络用于视频运动放大。为减轻噪声放大和其他光照变化可能引起的失真,我们在放大前引入了基于边缘输入的多尺度调节器。此外,我们提出了一种新颖的基于对比学习的损失函数,以进一步增强放大过程对噪声的鲁棒性。为改善纹理质量,我们引入了一种多分辨率放大生成架构,其中包含放大解码块。它从低分辨率到高分辨率生成分层放大。我们将所提出网络的性能与当前最先进的方法在合成视频和自然视频上进行定性和定量比较。此外,我们还进行了消融研究以分析我们方法中的各个模块。结果表明,我们提出的基线模型和轻量级模型优于当前最先进的方法。

期刊

Neurocomputing 封面图
Neurocomputing
IF:
6.5
论文数:
2.5W
被引数:
6.5W

机构

暂无机构信息
引用论文

引用论文

Motion magnification
err2005-07-01
err278
PREAI
errLiu, C; Torralba, A; Freeman, WT; Durand, F; Adelson, EH
err分享
err收藏
err分享
err收藏
Visual Vibrometry: Estimating Material Properties from Small Motions in Video
err2017-04-01
err0
errOAAI
errAbe Davis; Katherine L. Bouman; Justin G. Chen; Michael Rubinstein; Oral Buyukozturk; Fredo Durand; William T. Freeman
err分享
err收藏
err分享
err收藏
Multi Domain Learning for Motion Magnification
err
IF0
err2023-06-01
err0
PREAI
errJasdeep Singh; Subrahmanyam Murala; G. Sankara Raju Kosuru
err分享
err收藏
Motion Magnification Applications for the Protection of Italian Cultural Heritage Assets
errSENSORS
IF3.5
err2022-12-18
err8
errOAAI
errFioriti, Vincenzo; Roselli, Ivan; Cataldo, Antonino; Forliti, Sara; Colucci, Alessandro; Baldini, Massimiliano; Picca, Alessandro
err分享
err收藏
3D Motion Magnification: Visualizing Subtle Motions with Time-Varying Radiance Fields
err
IF0
err2023-10-01
err0
PREAI
errBrandon Y. Feng; Hadi Alzayer; Michael Rubinstein; William T. Freeman; Jia-Bin Huang
err分享
err收藏
学者 查看更多内容