arrow
返回

Video Frame Interpolation via Appearance-Based Intermediate Flow Estimation

delete2026-02-26
delete0
PRE
AI
K
Keyi Chen
J
Jingwei Xin
王南南 封面图
王南南 (Nannan Wang)
J
Jie Li
X
Xinbo Gao
DOI:10.1109/TIP.2026.3666772delete
delete原文链接
delete分享
delete收藏
摘要

摘要

En 中文
中间流估计是视频帧插值(VFI)的重要组成部分。大多数先前的工作使用插值来推导中间流,假设局部线性运动。然而,在处理极端运动时,这种方法并不有效。在本工作中,我们假设物体的运动轨迹由该物体的外观特征决定。基于此假设,我们提出了一种新的中间流估计方法,该方法从图像外观和帧间运动特征中获取中间帧的运动特征。此外,为了充分提取帧间特征,我们重新思考了VFI与先前工作中使用Swin-Transformer的差异,并通过循环移动窗口在自适应邻域内计算外观特征和运动特征。实验结果表明,我们的方法在固定时间和任意时间插值的不同数据集上均达到了最先进(state-of-the-art)的性能。此外,在处理具有极大运动的视频时,我们提出的方法优于需要输入四帧序列的模型。源代码可从https://github.com/chen12304/IFE-VFI获取。
Keyword:
Video frame interpolation
large motion
flow estimation

期刊

IEEE Transactions on Image Processing 封面图
IEEE Transactions on Image Processing
IF:
13.7
论文数:
1.0W
被引数:
8.4W

机构

X
xidian university
学者数:
6.6K
论文数: 2.2K
被引数: 0
引用论文

引用论文

View Synthesis by Appearance Flow
err2016-09-17
err0
PREAI
errTinghui Zhou; Shubham Tulsiani; Weilun Sun; Jitendra Malik; Alexei A. Efros
err分享
err收藏
Deep Animation Video Interpolation in the Wild
err2021-06-01
err0
errOAAI
errLi Siyao; Shiyu Zhao; Weijiang Yu; Wenxiu Sun; Dimitris Metaxas; Chen Change Loy; Ziwei Liu
err分享
err收藏
Event-guided Deblurring of Unknown Exposure Time Videos
err2022-11-03
err0
PREAI
errTaewoo Kim; Jeongmin Lee; Lin Wang; Kuk-Jin Yoon
err分享
err收藏
Super SloMo: High Quality Estimation of Multiple Intermediate Frames for Video Interpolation
err2018-06-01
err0
errOAAI
errHuaizu Jiang; Deqing Sun; Varan Jampani; Ming-Hsuan Yang; Erik Learned-Miller; Jan Kautz
err分享
err收藏
JNMR: Joint Non-Linear Motion Regression for Video Frame Interpolation
err2023-01-01
err0
PREAI
errLiu,Meiqin; Xu,Chenming; Yao,Chao; Lin,Chunyu; Zhao,Yao
err分享
err收藏
Real-Time Intermediate Flow Estimation for Video Frame Interpolation
err2022-10-23
err0
PREAI
errZhewei Huang; Tianyuan Zhang; Wen Heng; Boxin Shi; Shuchang Zhou
err分享
err收藏
学者 查看更多内容