.png){kind=icon}
返回
Multimodal sentiment analysis method based on image-text quantum transformer
.png){kind=icon}
PRE
AI
DOI：10.1016/j.neucom.2025.130107.png)
.png){kind=icon}
.png){kind=icon}
分享.png){kind=icon}
收藏
摘要
En 中文
多模态情感分析旨在识别和解释不同模态数据中包含的多样化情感信息。尽管多模态情感分析方法已取得显著成果，但在捕捉高维数据的复杂特征方面仍存在一定局限性。本文提出一种利用图像和文本量子Transformer（ITQT-MSA）的多模态情感分析方法，该方**法创新性地结合量子计算和深度学习技术，以实现更精准的情感识别与分析。首先，设计了一种面向文本的参数化量子电路，利用量子叠加和纠缠特性，并结合Transformer模型，从文本数据中实现深度特征提取。其次，构建了另一种面向图像的参数化量子电路，并与视觉Transformer（VIT）相结合，充分提取图像中的情感信息。最后，通过设计的交叉注意力融合机制，实现了文本和图像特征的精确对齐与融合。实验在经典计算机上通过在模拟噪声环境中设计量子电路进行，结果表明，所提方法优于当前最优（SOTA）模型。**
Keyword:
Multimodal sentiment analysis
Quantum transformer
Parameterized quantum circuit
Visual Transformer
Cross-attention fusion
期刊
IF:
6.5
论文数:
2.5W
被引数:
6.5W
机构
暂无机构信息
引用论文
Quantum-inspired multimodal fusion for video sentiment analysis基于量子启发的多模态融合视频情感分析.png)
INFORMATION FUSION
OAAI
INFORMATION FUSIONIF15.5
OAAI分享收藏分享收藏Entity-Sensitive Attention and Fusion Network for Entity-Level Multimodal Sentiment ClassificationOAAI
OAAI分享收藏CiteNet: Cross-modal incongruity perception network for multimodal sentiment predictionCiteNet: 用于多模态情感预测的跨模态不一致性感知网络
PREAI
分享收藏D2R: Dual-Branch Dynamic Routing Network for Multimodal Sentiment DetectionD2R：用于多模态情感检测的双分支动态路由网络
PREAI
分享收藏Multimodal Intelligence: Representation Learning, Information Fusion, and Applications多模态智能: 表征学习、信息融合及应用
OAAI
OAAI分享收藏Quantum Fuzzy Neural Network for multimodal sentiment and sarcasm detection用于多模态情感和讽刺检测的量子模糊神经网络INFORMATION FUSION
INFORMATION FUSIONIF15.5
PREAI
分享收藏
查看更多内容