arrow
返回

CNVC: A Compact Neural Video Codec With Instance-Level Adaptation

delete2025-12-03
delete0
PRE
AI
李跃 封面图
李跃 (Yue Li)
C
Chaoyi Lin
J
Junru Li
K
Kai Zhang
L
Li Zhang
DOI:10.1109/TCSVT.2025.3640077delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
基于自编码器的神经压缩方法利用表现力强的模型来拟合大规模数据集,但往往会带来相当大的解码复杂度。最近,具有降低解码复杂度的过拟合编解码器作为替代方案受到了关注。然而,它们通常需要访问整个视频或同时处理多个帧来进行编码,从而导致显著的系统延迟。为解决这些局限性,我们提出了CNVC,一种紧凑型神经视频编解码器,它采用实例级自适应技术实现高效灵活的视频压缩。CNVC是完全过拟合的(每帧独立优化,最多使用45k次迭代以在本研究中实现最佳性能),构建在COOL-CHIC视频模型基础上,并进行了大量的架构和训练增强。在每像素仅1300次MAC运算的解码复杂度下,CNVC提供了比以往基于自编码器和过拟合的编解码器更紧凑的解决方案。此外,CNVC继承了COOL-CHIC视频的逐帧过拟合机制,能够实现灵活的编码配置(例如低延迟模式)。在压缩效率方面,与COOL-CHIC视频相比,CNVC在HEVC和UVG数据集上实现了显著的比特率降低。据我们所知,CNVC是首个在如此低的解码复杂度水平上达到HEVC(x265慢速设置)性能的紧凑型神经编解码器。
Keyword:
Compact neural codec
COOL-CHIC
instance-level adaptation
video compression

期刊

IEEE Transactions on Circuits and Systems for Video Technology 封面图
IEEE Transactions on Circuits and Systems for Video Technology
IF:
11.1
论文数:
846
被引数:
3.1W

机构

B
bytedance inc.
学者数:
20
论文数: 14
被引数: 0
B
bytedance
学者数:
88
论文数: 40
被引数: 3
引用论文

引用论文

Overview of the Versatile Video Coding (VVC) Standard and its Applications
err2021-10-01
err0
errOAAI
errBenjamin Bross; Ye-Kui Wang; Yan Ye; Shan Liu; Jianle Chen; Gary J. Sullivan; Jens-Rainer Ohm
err分享
err收藏
Cool-chic video: Learned video coding with 800 parameters
err2024-03-19
err0
PREAI
errLeguay,Thomas; Ladune,Théo; Philippe,Pierrick; Déforges,Olivier
err分享
err收藏
End-to-End Learning for Video Frame Compression with Self-Attention
err2020-06-01
err0
errOAAI
errNannan Zou; Honglei Zhang; Francesco Cricri; Hamed R. Tavakoli; Jani Lainema; Emre Aksu; Miska Hannuksela; Esa Rahtu
err分享
err收藏
ELF-VC: Efficient Learned Flexible-Rate Video Coding
err2021-10-01
err0
errOAAI
errOren Rippel; Alexander G. Anderson; Kedar Tatwawadi; Sanjay Nair; Craig Lytle; Lubomir Bourdev
err分享
err收藏
err
IF0
err
err0
PREAI
err
err分享
err收藏
Deep Hierarchical Video Compression
err
IF0
err2024-03-24
err0
PREAI
errMing Lu; Zhihao Duan; Fengqing Zhu; Zhan Ma
err分享
err收藏
学者 查看更多内容