arrow
返回

Object-Attribute-Relation Representation-Based Video Semantic Communication

delete2025-07-01
delete0
PRE
AI
Q
Qiyuan Du
Y
Yiping Duan
Q
Qianqian Yang
X
Xiaoming Tao
M
Mérouane Debbah
DOI:10.1109/JSAC.2025.3559115delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
随着多媒体数据量的快速增长,在虚拟现实和未来视频流服务等应用中,对高效视频传输的需求日益增加。语义通信正作为一种关键技术出现,用于确保在低带宽、高噪声环境下的高效可靠传输。然而,大多数现有方法侧重于依赖端到端训练的联合信源信道编码(JSCC)。这些方法通常缺乏可解释的语义表示,并且难以适应各种下游任务。在本文中,我们引入对象-属性-关系(OAR)作为视频的语义框架,以促进低比特率编码,并增强JSCC过程以实现更有效的视频传输。我们利用OAR序列进行低比特率表示和生成视频重建。此外,我们将OAR整合到图像JSCC模型中,以优先分配通信资源给对下游任务更关键的区域。我们在交通监控视频数据集上的实验评估了该方法在视频传输性能方面的有效性。实验结果表明,我们的基于OAR的视频编码方法不仅在低比特率下优于H.265编码,还能与JSCC协同工作,实现鲁棒且高效的视频传输。
Keyword:
Video coding
object-attribute-relation
wireless transmission
joint source-channel coding
semantic communication

期刊

IEEE Journal on Selected Areas in Communications 封面图
IEEE Journal on Selected Areas in Communications
IF:
17.2
论文数:
6.4K
被引数:
3.1W

机构

K
Khalifa University
学者数:
840
论文数: 445
被引数: 7
T
tsinghua university
学者数:
11.9W
论文数: 10.0W
被引数: 137
Z
zhejiang university
学者数:
17.7W
论文数: 12.1W
被引数: 152
学者 查看更多机构
引用论文

引用论文

Adaptive Bitrate Video Semantic Communication over Wireless Networks
err
IF0
err2023-11-02
err0
PREAI
errWentao Gong; Haonan Tong; Sihua Wang; Zhaohui Yang; Xinxin He; Changchuan Yin
err分享
err收藏
Learning Canonical Representations for Scene Graph to Image Generation
err2020-11-13
err0
PREAI
errRoei Herzig; Amir Bar; Huijuan Xu; Gal Chechik; Trevor Darrell; Amir Globerson
err分享
err收藏
VR plus HD: Video Semantic Reconstruction From Spatio-Temporal Scene Graphs
err2023-09-01
err0
PREAI
errLi, Chenxing; Duan, Yiping; Du, Qiyuan; Sun, Shiqi; Deng, Xin; Tao, Xiaoming
err分享
err收藏
Visual Genome: Connecting Language and Vision Using Crowdsourced Dense Image Annotations视觉基因组: 使用众包密集图像注释连接语言和视觉
err2017-02-06
err3.1K
errOAAI
errKrishna, Ranjay; Zhu, Yuke; Groth, Oliver; Johnson, Justin; Hata, Kenji; Kravitz, Joshua; Chen, Stephanie; Kalantidis, Yannis; Li, Li-Jia; Shamma, David A.; Bernstein, Michael S.; Li Fei-Fei
err分享
err收藏
学者 查看更多内容