Multimodal fusion: A study on speech-text emotion recognition with the integration of deep learning

Multimodal fusion: A study on speech-text emotion recognition with the integration of deep learning

Recognition of various human emotions holds significant value in numerous real-world scenarios. This paper focuses on the multimodal fusion of speech and text for emotion recognition. A 39-dimensional Mel-frequency cepstral coefficient (MFCC) was used as a feature for speech emotion. A 300-dimension...

সম্পূর্ণ বিবরণ

গ্রন্থ-পঞ্জীর বিবরন
প্রধান লেখক:	Yanan Shang, Tianqi Fu
বিন্যাস:	প্রবন্ধ
ভাষা:	English
প্রকাশিত:	Elsevier 2024-12-01
মালা:	Intelligent Systems with Applications
বিষয়গুলি:	Multimodal fusion Deep learning Glove model BiGRU Emotion recognition
অনলাইন ব্যবহার করুন:	http://www.sciencedirect.com/science/article/pii/S2667305324001108

অনুরূপ উপাদানগুলি

Emotion recognition and achievement prediction for foreign language learners under the background of network teaching
অনুযায়ী: Yi Ding, অন্যান্য
প্রকাশিত: (2022-10-01)

Research on Dual-Emotion Feature Fusion and Performance Improvement in Rumor Detection
অনুযায়ী: Wen Jiang, অন্যান্য
প্রকাশিত: (2024-09-01)

Chinese Mathematical Knowledge Entity Recognition Based on Linguistically Motivated Bidirectional Encoder Representation from Transformers
অনুযায়ী: Wei Song, অন্যান্য
প্রকাশিত: (2025-01-01)

Named Entity Recognition for Chinese Texts on Marine Coral Reef Ecosystems Based on the BERT-BiGRU-Att-CRF Model
অনুযায়ী: Danfeng Zhao, অন্যান্য
প্রকাশিত: (2024-07-01)

Microblog Text Emotion Classification Algorithm Based on TCN-BiGRU and Dual Attention
অনুযায়ী: Yao Qin, অন্যান্য
প্রকাশিত: (2023-02-01)

A Framework to Evaluate Fusion Methods for Multimodal Emotion Recognition
অনুযায়ী: Diego Pena, অন্যান্য
প্রকাশিত: (2023-01-01)

A Survey of Deep Learning-Based Multimodal Emotion Recognition: Speech, Text, and Face
অনুযায়ী: Hailun Lian, অন্যান্য
প্রকাশিত: (2023-10-01)

Multimodal transformer augmented fusion for speech emotion recognition
অনুযায়ী: Yuanyuan Wang, অন্যান্য
প্রকাশিত: (2023-05-01)

Study on Chinese Semantic Entity Recognition Method for Cabin Utilizing BERT-BiGRU Model
অনুযায়ী: Ruina Ma, অন্যান্য
প্রকাশিত: (2024-01-01)

MPNet-GRUs: Sentiment Analysis With Masked and Permuted Pre-Training for Language Understanding and Gated Recurrent Units
অনুযায়ী: Nicole Kai Ning Loh, অন্যান্য
প্রকাশিত: (2024-01-01)

Underwater Target Classification Based on Feature Fusion and Gene Encoding of CNN-BIGRU-Attention
অনুযায়ী: Ziyi Feng, অন্যান্য
প্রকাশিত: (2023-01-01)

A Hybrid Deep Learning Architecture for Social Media Bots Detection Based on BiGRU-LSTM and GloVe Word Embedding
অনুযায়ী: Zineb Ellaky, অন্যান্য
প্রকাশিত: (2024-01-01)

A New Network Structure for Speech Emotion Recognition Research
অনুযায়ী: Chunsheng Xu, অন্যান্য
প্রকাশিত: (2024-02-01)

Summarization of scholarly articles using BERT and BiGRU: Deep learning-based extractive approach
অনুযায়ী: Sheher Bano, অন্যান্য
প্রকাশিত: (2023-10-01)

Recognition of printed Urdu script in Nastaleeq font by using CNN-BiGRU-GRU Based Encoder-Decoder Framework
অনুযায়ী: Sohail Zia, অন্যান্য
প্রকাশিত: (2023-05-01)

Robust Multimodal Emotion Recognition from Conversation with Transformer-Based Crossmodality Fusion
অনুযায়ী: Baijun Xie, অন্যান্য
প্রকাশিত: (2021-07-01)

ACG-EmoCluster: A Novel Framework to Capture Spatial and Temporal Information from Emotional Speech Enhanced by DeepCluster
অনুযায়ী: Huan Zhao, অন্যান্য
প্রকাশিত: (2023-05-01)

Deep Multimodal Emotion Recognition on Human Speech: A Review
অনুযায়ী: Panagiotis Koromilas, অন্যান্য
প্রকাশিত: (2021-08-01)

Ship Anomalous Behavior Detection Using Clustering and Deep Recurrent Neural Network
অনুযায়ী: Bohan Zhang, অন্যান্য
প্রকাশিত: (2023-03-01)

A Novel BiGRU-Attention Model for Predicting Corn Market Prices Based on Multi-Feature Fusion and Grey Wolf Optimization
অনুযায়ী: Yang Feng, অন্যান্য
প্রকাশিত: (2025-02-01)

Text Sentiment Analysis Based on Fusion of Attention Mechanism and BiGRU
অনুযায়ী: YANG Qing, ZHANG Ya-wen, ZHU Li, WU Tao
প্রকাশিত: (2021-11-01)

A Novel Traffic Classification Approach by Employing Deep Learning on Software-Defined Networking
অনুযায়ী: Daniel Nuñez-Agurto, অন্যান্য
প্রকাশিত: (2024-04-01)

Multi-Label Multimodal Emotion Recognition With Transformer-Based Fusion and Emotion-Level Representation Learning
অনুযায়ী: Hoai-Duy Le, অন্যান্য
প্রকাশিত: (2023-01-01)

Human Action Recognition Based on Improved Two-Stream Convolution Network
অনুযায়ী: Zhongwen Wang, অন্যান্য
প্রকাশিত: (2022-06-01)

Dual-Branch Multimodal Fusion Network for Driver Facial Emotion Recognition
অনুযায়ী: Le Wang, অন্যান্য
প্রকাশিত: (2024-10-01)

Research on Medical Text Parsing Method Based on BiGRU-BiLSTM Multi-Task Learning
অনুযায়ী: Yunli Fan, অন্যান্য
প্রকাশিত: (2024-11-01)

DropBlock based bimodal hybrid neural network for wireless communication modulation recognition
অনুযায়ী: Yan GAO, অন্যান্য
প্রকাশিত: (2022-05-01)

DropBlock based bimodal hybrid neural network for wireless communication modulation recognition
অনুযায়ী: Yan GAO, অন্যান্য
প্রকাশিত: (2022-05-01)

Knowledge-oriented Hierarchical Neural Network for sentiment classification
অনুযায়ী: Wang, Yanliu, অন্যান্য
প্রকাশিত: (2020)

Research on power system fault prediction based on GA-CNN-BiGRU
অনুযায়ী: Daohua Zhang, অন্যান্য
প্রকাশিত: (2023-08-01)

TACFN: Transformer-Based Adaptive Cross-Modal Fusion Network for Multimodal Emotion Recognition
অনুযায়ী: Feng Liu, অন্যান্য
প্রকাশিত: (2023-12-01)

Multimodal Daily-Life Emotional Recognition Using Heart Rate and Speech Data From Wearables
অনুযায়ী: Eesun Moon, অন্যান্য
প্রকাশিত: (2024-01-01)

Longitudinal dependence of the forecast accuracy of the ionospheric total electron content in the equatorial zone
অনুযায়ী: Artem Kharakhashyan, অন্যান্য
প্রকাশিত: (2024-09-01)

Comparison of the Forecast Accuracy of Total Electron Content for Bidirectional and Temporal Convolutional Neural Networks in European Region
অনুযায়ী: Artem Kharakhashyan, অন্যান্য
প্রকাশিত: (2023-06-01)

Real-time music emotion recognition based on multimodal fusion
অনুযায়ী: Xingye Hao, অন্যান্য
প্রকাশিত: (2025-03-01)

MLHS-CGCapNet: A Lightweight Model for Multilingual Hate Speech Detection
অনুযায়ী: Abida Kousar, অন্যান্য
প্রকাশিত: (2024-01-01)

Sentiment Analysis for E-Commerce Product Reviews in Chinese Based on Sentiment Lexicon and Deep Learning
অনুযায়ী: Li Yang, অন্যান্য
প্রকাশিত: (2020-01-01)

A multi-stage fault prediction method of continuous casting machine based on Weibull distribution and deep learning
অনুযায়ী: Erbao Xu, অন্যান্য
প্রকাশিত: (2023-08-01)

Polish Speech and Text Emotion Recognition in a Multimodal Emotion Analysis System
অনুযায়ী: Kamil Skowroński, অন্যান্য
প্রকাশিত: (2024-11-01)

Multimodal Attention Network for Continuous-Time Emotion Recognition Using Video and EEG Signals
অনুযায়ী: Dong Yoon Choi, অন্যান্য
প্রকাশিত: (2020-01-01)