返回
Adaptive Memory Fusion for Multi-Frame Optical Flow Estimation
DOI:10.1016/j.neucom.2025.131005.png)
摘要
En 中文
多帧光流模型相较于双帧模型展现出更优的性能。然而,它们存在若干缺点,例如初始帧缺乏光流、输入帧数增加时计算负载急剧上升,以及帧整合时性能波动。为解决这些问题,我们基于自适应记忆融合(AMF)模块提出了AMFFlow,该模块通过记忆融合有效利用多帧信息,从而克服上述局限性。通过采用记忆融合机制,我们的方法能够高效利用多帧信息以估计更精确的光流,同时保持每帧恒定的计算成本。据我们所知,AMFFlow是首个能够有效利用帧信息进行光流估计的开创性模型。AMF模块以其低延迟和即插即用特性为特点。此外,我们提出了比例去偏端点误差(PDEPE),这是一种旨在解决数据集偏差导致的多帧光流模型评估误差的新型指标。大量实验结果表明,AMFFlow实现了当前最优(SOTA)的泛化性能。与竞争模型MemFlow相比,在Sintel Training Clean和Sintel Training Final数据集上的性能提升分别约为5.9%和3.9%。源代码和预训练模型将于https://github.com/keacifer/AMFFlow公开发布。
期刊
IF:
6.5
论文数:
2.5W
被引数:
6.5W
机构
暂无机构信息
引用论文
Adaptive Visual Servoing for Obstacle Avoidance of Micro Unmanned Aerial Vehicle with Optical Flow and Switched System Model
Processes
IF0

