arrow
返回

Multi-Domain Spatial-Temporal Redundancy Mining for Efficient Learned Video Compression

delete
delete0
PRE
AI
Y
Yuan Feng
潘兆庆 封面图
潘兆庆 (Zhaoqing Pan)
雷
雷建军 (Jianjun Lei)
彭勃 封面图
彭勃 (Peng, Bo)
F
Fu Lee Wang
S
Sam Kwong
DOI:10.1109/TBC.2025.3587532delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
基于条件编码的 Learned Video Compression (CC-LVC) 已成为 Learned Video Compression 领域的重要范式,因为它能够有效探索巨大上下文空间中的时空冗余。然而,现有的 CC-LVC 方法无法准确建模运动信息,也难以高效挖掘非刚性运动和非线性形变复杂区域的上下文相关性。为解决这些问题,本文提出了一种高效的 CC-LVC 方法,该方法通过挖掘多运动域和感受域间的时空依赖关系来提升视频编码效率。为准确建模复杂运动并生成精确的时域上下文,本文提出了一种 Multi-domain Motion modeling Network (MMNet),用于从空间域和频率域捕获鲁棒的运动信息。此外,开发了一种多域上下文精炼模块,用于有选择地突出频率域时域上下文并自适应融合多域时域上下文,从而有效缓解运动误差导致的时域上下文不准确问题。为高效压缩视频信号,本文提出了一种基于 Multi-scale Long Short-range Decorrelation Module (MLSDM) 的上下文编解码器,其中设计的 MLSDM 用于学习不同感受域间的长短期时空依赖关系及通道级相关性。大量实验结果表明,所提出的方法在 PSNR 和 MS-SSIM 指标上显著优于 VTM 17.0 及其他当前最先进的 Learned Video Compression 方法。
Keyword:
Learned video compression
conditional coding
frequency decomposition
multi-scale long short-range decorrelation
visual state space block

期刊

IEEE Transactions on Broadcasting 封面图
IEEE Transactions on Broadcasting
IF:
4.8
论文数:
2.1K
被引数:
3.0K

机构

T
tianjin university
学者数:
8.0W
论文数: 5.8W
被引数: 88
L
Lingnan University
学者数:
1.0K
论文数: 1.4K
被引数: 202
H
Hong Kong Metropolitan University
学者数:
1.0K
论文数: 1.1K
被引数: 805
学者 查看更多机构
引用论文

引用论文

Overview of the Versatile Video Coding (VVC) Standard and its Applications
err2021-10-01
err0
errOAAI
errBenjamin Bross; Ye-Kui Wang; Yan Ye; Shan Liu; Jianle Chen; Gary J. Sullivan; Jens-Rainer Ohm
err分享
err收藏
Temporal Adaptive Learned Surveillance Video Compression
err2024-01-01
err0
PREAI
errZhao, Yu; Ye, Mao; Ji, Luping; Guo, Hongwei; Zhu, Ce
err分享
err收藏
End-To-End Compression for Surveillance Video With Unsupervised Foreground-Background Separation
err2023-12-01
err10
PREAI
errZhao, Yu; Luo, Dengyan; Wang, Fuchun; Gao, Han; Ye, Mao; Zhu, Ce
err分享
err收藏
Multiple hypotheses based motion compensation for learned video compression
err2023-09-01
err4
PREAI
errLin, Rongqun; Wang, Meng; Zhang, Pingping; Wang, Shiqi; Kwong, Sam
err分享
err收藏
λ-Domain Rate Control via Wavelet-Based Residual Neural Network for VVC HDR Intra Coding
err2024-01-01
err0
PREAI
errYuan, Feng; Lei, Jianjun; Pan, Zhaoqing; Peng, Bo; Xie, Haoran
err分享
err收藏
err
IF0
err
err0
PREAI
err
err分享
err收藏
学者 查看更多内容