arrow
返回

Continuously self-adaptive multimodal sentiment analysis

delete2026-05-01
delete0
PRE
AI
S
Sui, Mengmeng *
W
Weijun Gao
C
Chen, Tao
L
Lianyong Qi
DOI:10.1108/ijwis-01-2026-0026delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
本文旨在解决多模态情感分析中模态噪声和情感线索可靠性的持续变化问题。这些动态感知特性对持续情感感知构成挑战,尤其是在存在模态冲突的情况下。设计/方法/途径作者提出了一种持续自适应多模态情感分析方法(CAMSA)。CAMSA将模态特征解耦为共享特征和私有特征,并引入变分信息瓶颈方法对共享特征进行概率建模和信息压缩,然后在情感线索逐步显现的过程中持续抑制冗余和噪声信息。此外,设计了一种多维自适应特征融合机制,从语义确定性、模态一致性和情感极端性角度评估模态可靠性。研究发现实验结果表明,在CMU-MOSI、CMU-MOSEI和CH-SIMS上的CAMSA在大多数评估指标上优于现有模型,验证了其在处理模态噪声和模态冲突方面的有效性。原始性/价值从持续情感感知的需求出发,本文提出了一种持续自适应的CAMSA框架,该框架结合了共享特征精炼与多维自适应融合机制,能够在动态和演变的感知场景中实现稳健的跨模态情感建模。CAMSA方法能够有效解决复杂动态情感感知任务中固定融合策略的问题。
Keyword:
Multimodal sentiment analysis
Feature decoupling
Self-adaptive
Modality conflict

期刊

I
International Journal of Web Information Systems
IF:
2.3
论文数:
20
被引数:
0

机构

L
lanzhou university of technology
学者数:
1.2W
论文数: 7.0K
被引数: 4
C
china university of petroleum
学者数:
4.1W
论文数: 2.7W
被引数: 30
引用论文

引用论文

Neural correlates of reliability-based cue weighting during multisensory integration
err2011-11-20
err0
errOAAI
errChristopher R Fetsch; Alexandre Pouget; Gregory C DeAngelis; Dora E Angelaki
err分享
err收藏
Memory Fusion Network for Multi-view Sequential Learning
err2018-04-27
err0
errOAAI
errAmir Zadeh; Paul Pu Liang; Navonil Mazumder; Soujanya Poria; Erik Cambria; Louis-Philippe Morency
err分享
err收藏
DialogueRNN: An Attentive RNN for Emotion Detection in Conversations
err2019-07-17
err0
errOAAI
errNavonil Majumder; Soujanya Poria; Devamanyu Hazarika; Rada Mihalcea; Alexander Gelbukh; Erik Cambria
err分享
err收藏
Emotion Recognition From Multiple Modalities: Fundamentals and methodologies
err2021-11-01
err76
errOAAI
errZhao, Sicheng; Jia, Guoli; Yang, Jufeng; Ding, Guiguang; Keutzer, Kurt
err分享
err收藏
学者 查看更多内容