BiMSA: Multimodal Sentiment Analysis Based on BiGRU and Bidirectional Interactive Attention
Rattachement africain : cn. Niveau de preuve : code pays fourni par la source.
Le résumé fourni par la source
Currently, the significance of multimodal sentiment analysis is progressively increasing. However, the heterogeneity of multimodal signals poses a challenge in learning modality representation and fusing information. To address it, the BiMSA (multimodal sentiment analysis based on BiGRU and bidirectional interactive attention) is proposed in this paper. In the modality representation learning layer, BiMSA incorporates a structure consisting of BiGRU to extract contextual information from video and audio inputs. Subsequently, modality features are projected into modality internal representations and interactive representations for extracting information. This practice allows the model to take into account more aspects of modality information. In terms of the modality fusion layer, a bidirectional interactive attention mechanism is used to focus on the key representations of key modalities, and integrate multimodal information flexibly and efficiently. Attention weights are concentrated on modality representations that synergistically contribute toward overall sentiment orientation. Additionally, the constraints of similarity loss and difference loss are introduced to align with representations while mitigating redundant information and achieving a better fusion effect. Experimental results on public datasets (CMU-MOSI and CMU-MOSEI) demonstrate the effectiveness of the BiMSA model.
Ce résumé expose les affirmations des auteurs. BNTIC ne l’interprète pas comme une validation indépendante des résultats.
Le contrôle bibliographique ouvert
DOI retrouvé dans Crossref DOI retrouvé ; titre concordant.
- Titre Crossref
- BiMSA: Multimodal Sentiment Analysis Based on BiGRU and Bidirectional Interactive Attention
- Date Crossref
- 24/03/2025
- Éditeur
- SAGE Publications
- Type
- journal-article
Ce recoupement confirme des métadonnées liées au DOI. Il ne confirme ni la méthode ni les conclusions de l’étude, et il ne compte pas comme une seconde source scientifique indépendante.
Où se fait cette recherche
-
Xinjiang University pays non établi dans la noticeUniversité ou école supérieure
-
Xinjiang Normal University pays non établi dans la noticeUniversité ou école supérieure
-
College of Mathematics and System Sciences pays non établi dans la noticeUniversité ou école supérieure
-
Chengdu Wuhou Health Education Medical Laboratory Co. pays non établi dans la noticeStructure de recherche
-
School of Mathematical Sciences pays non établi dans la noticeUniversité ou école supérieure
Xinjiang University, Xinjiang Normal University et College of Mathematics and System Sciences, avec 2 autres affiliations.
Une affiliation ne permet pas de déduire la nationalité d’un auteur.