arrow
返回

Toward Learned Image Compression for Multiple Semantic Analysis Tasks

delete2025-08-21
delete0
PRE
AI
Z
Zhisen Tang
X
Xiaokai Yi
H
Hanli Wang
DOI:10.1109/TBC.2025.3597154delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
近年来,基于深度神经网络(DNN)的图像压缩方法在码率失真性能上表现出优于传统编解码器的优势。然而,大多数现有的基于DNN的压缩方法仅针对特定码率下的人眼感知进行信号保真度优化,忽视了在压缩比特流中保留丰富的语义信息。这一局限性使得现有深度编解码器压缩的图像不适用于机器视觉应用。为弥合图像压缩与多语义分析任务之间的差距,本研究提出将自监督学习(SSL)与深度图像压缩相结合,以学习通用的压缩表示,使多种计算机视觉任务能够从压缩域进行语义分析。具体而言,设计了码率约束下的语义引导SSL,以保留通用视觉特征的语义并去除与语义分析无关的冗余。同时,提出了一种具有高阶空间交互的压缩网络,以低复杂度捕获长距离依赖关系,从而去除全局冗余。在不产生像素级重建解码成本的情况下,该方法压缩的特征能够以紧凑方式服务于多种语义分析任务。来自多个语义分析任务的实验结果证实,在相似码率下,所提出的方法在各项分析性能上显著优于传统编解码器和最新的深度图像压缩方法。本研究的源代码可在https://mic.tongji.edu.cn中找到。
Keyword:
Image compression
self-supervised learning
machine vision
semantic analysis

期刊

IEEE Transactions on Broadcasting 封面图
IEEE Transactions on Broadcasting
IF:
4.8
论文数:
2.1K
被引数:
3.0K

机构

T
tongji university
学者数:
7.9W
论文数: 6.0W
被引数: 98
引用论文

引用论文

Overview of the Versatile Video Coding (VVC) Standard and its Applications
err2021-10-01
err0
errOAAI
errBenjamin Bross; Ye-Kui Wang; Yan Ye; Shan Liu; Jianle Chen; Gary J. Sullivan; Jens-Rainer Ohm
err分享
err收藏
Full-Reference Image Quality Assessment by Combining Features in Spatial and Frequency Domains
err2019-03-01
err38
PREAI
errTang, Zhisen; Zheng, Yuanlin; Gu, Ke; Liao, Kaiyang; Wang, Wei; Yu, Miaomiao
err分享
err收藏
Towards Coding for Human and Machine Vision: Scalable Face Image Coding
err2021-01-01
err39
PREAI
errYang, Shuai; Hu, Yueyu; Yang, Wenhan; Duan, Ling-Yu; Liu, Jiaying
err分享
err收藏
err分享
err收藏
err分享
err收藏
学者 查看更多内容