arrow
返回

Joint reference frame synthesis and post filter enhancement for Versatile Video Coding

delete2025-04-01
delete0
PRE
AI
W
Weijie Bao
Z
Zhang, Yuantong
J
Jianghao Jia
Z
Zhenzhong Chen *
S
Shan Liu
DOI:10.1016/j.jvcir.2025.104433delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
本文提出了一种针对通用视频编码(VVC)的联合参考帧合成(RFS)和后处理滤波增强(PFE)方法,旨在探索不同基于神经网络的视频编码(NNVC)工具的组合,以更好地利用VVC的分层双向编码结构。RFS和PFE均利用了时空增强网络(STENet),该网络接收两帧带有失真的输入帧,生成两帧失真抑制后的增强帧,并伴随一个中间合成帧。STENet包含两个管道:合成管道和增强管道,分别针对不同目的进行设计。在RFS过程中,两帧重建帧被送入STENet的合成管道,以合成一个与待编码帧相似的虚拟参考帧,该合成帧作为附加参考帧插入到参考帧列表(RPL)中。在PFE过程中,两帧重建帧被送入STENet的增强管道,以减轻其失真和畸变,最终得到失真和畸变降低的增强帧。为降低推理复杂度,我们提出了RFS和PFE的联合推理(JISE),通过单次执行STENet实现。将RFS、PFE和JISE集成到VVC参考软件VTM-15.0中,并在随机访问(RA)配置下协调于一个新颖的时空增强窗口(STEW)中。在RA配置下,所提方法在三个组件上的平均BD-rate(PSNR)分别为-7.34%/-17.21%/-16.65%。
Keyword:
Neural network-based video coding
Versatile Video Coding (VVC)
Inter prediction
Post-processing filter

期刊

Journal of Visual Communication and Image Representation 封面图
Journal of Visual Communication and Image Representation
IF:
3.1
论文数:
433
被引数:
5.6K

机构

T
tencent amer
学者数:
1
论文数: 2
被引数: 0
引用论文

引用论文

Overview of the Versatile Video Coding (VVC) Standard and its Applications
err2021-10-01
err0
errOAAI
errBenjamin Bross; Ye-Kui Wang; Yan Ye; Shan Liu; Jianle Chen; Gary J. Sullivan; Jens-Rainer Ohm
err分享
err收藏
err分享
err收藏
err分享
err收藏
err分享
err收藏
Iterative Training of Neural Networks for Intra Prediction
err2021-01-01
err11
errOAAI
errDumas, Thierry; Galpin, Franck; Bordes, Philippe
err分享
err收藏
Image and Video Compression With Neural Networks: A Review
err2020-06-01
err0
errOAAI
errSiwei Ma; Xinfeng Zhang; Chuanmin Jia; Zhenghui Zhao; Shiqi Wang; Shanshe Wang
err分享
err收藏
Developments in International Video Coding Standardization After AVC, With an Overview of Versatile Video Coding (VVC)
err2021-09-01
err241
errOAAI
errBross, Benjamin; Chen, Jianle; Ohm, Jens-Rainer; Sullivan, Gary J.; Wang, Ye-Kui
err分享
err收藏
Motion Vector Coding and Block Merging in the Versatile Video Coding Standard
err2021-10-01
err0
errOAAI
errWei-Jung Chien; Li Zhang; Martin Winken; Xiang Li; Ru-Ling Liao; Han Gao; Chih-Wei Hsu; Hongbin Liu; Chun-Chi Chen
err分享
err收藏
学者 查看更多内容