arrow
返回

FSDM: An efficient video super-resolution method based on Frames-Shift Diffusion Model

delete2025-05-27
delete0
PRE
AI
S
Shijie Yang *
C
Chao Chen
J
Jie Liu
唐
唐杰 (Jie Tang)
G
Gangshan Wu
DOI:10.1016/j.neunet.2025.107435delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
视频超分辨率是一项旨在通过复杂的建模技术提升视频质量的基础任务。扩散模型在图像超分辨率处理方面的最新进展显著提升了其能力。然而,由于时序融合模块的计算复杂性,将这些模型集成到视频超分辨率工作流中仍受到限制,其所需的计算资源比图像对应模型更多。为解决这一挑战,我们提出了一种基于图像扩散模型的新型方法:帧移扩散模型。与直接训练基于扩散的视频超分辨率模型相比,在不引入复杂时序模块的情况下重新设计图像模型的扩散过程,所需的训练消耗更少。我们通过使用光流并将时序信息融入图像超分辨率扩散模型,实现了多帧融合。该模型能够调整扩散过程,使其在无需额外权重参数的情况下,从图像超分辨率平滑过渡到视频超分辨率扩散。因此,帧移扩散模型能够高效地逐帧处理视频,同时保持计算效率并实现更优性能。它提升了感知质量,并在PSNR和SSIM指标上达到了与其他基于扩散的VSR顶尖方法的相当性能。该方法通过简化时序数据的集成优化了视频超分辨率,从而解决了该领域的关键挑战。
Keyword:
Video super-resolution
Diffusion
Deep neural network

期刊

Neural Networks 封面图
Neural Networks
IF:
6.3
论文数:
8.2K
被引数:
3.0W

机构

暂无机构信息
引用论文

引用论文

SRDiff: Single image super-resolution with diffusion probabilistic modelsSRDiff: 具有扩散概率模型的单幅图像超分辨率
err2022-03-01
err330
errOAAI
errLi, Haoying; Yang, Yifan; Chang, Meng; Chen, Shiqi; Feng, Huajun; Xu, Zhihai; Li, Qi; Chen, Yueting
err分享
err收藏
Making a Completely Blind Image Quality Analyzer制作全盲图像质量分析仪
err2013-03-01
err4.2K
PREAI
errMittal, Anish; Soundararajan, Rajiv; Bovik, Alan C.
err分享
err收藏
VRT: A Video Restoration TransformerVRT: 视频恢复变压器
err2024-01-01
err19
errOAAI
errLiang, Jingyun; Cao, Jiezhang; Fan, Yuchen; Zhang, Kai; Ranjan, Rakesh; Li, Yawei; Timofte, Radu; Van Gool, Luc
err分享
err收藏
DiffIR: Efficient Diffusion Model for Image Restoration
err2023-10-01
err0
errOAAI
errBin Xia; Yulun Zhang; Shiyin Wang; Yitong Wang; Xinglong Wu; Yapeng Tian; Wenming Yang; Luc Van Gool
err分享
err收藏
学者 查看更多内容