基于3D分层卷积融合的多模态生理信号情绪识别
近年来,脑电等生理信号由于能客观体现真实情绪已逐渐成为情绪识别研究的热门对象。然而,单模态的脑电信号存在情绪信息特征不完备问题,多模态生理信号存在情绪信息交互不充分问题。针对这些问题,提出基于3D分层卷积的多模态特征融合模型,旨在充分挖掘多模态交互关系,更准确地刻画情感信息。首先分别通过深度可分离卷积网络提取脑电、眼电和肌电3种模态的生理信号的多模态初级情绪特征信息,再对得到的多模态初级情绪特征信息进行3D卷积融合操作,实现两两模态间的局部交互以及所有模态间的全局交互,获取包含不同生理信号情绪特征的多模态融合特征。实验结果表明,提出的模型在DEAP数据集的效价、唤醒度的二分类和四分类任务中达到...
Main Authors: | 凌文芬, 陈思含, 彭勇, 孔万增 |
---|---|
Format: | Article |
Language: | zho |
Published: |
POSTS&TELECOM PRESS Co., LTD
2021-03-01
|
Series: | 智能科学与技术学报 |
Subjects: | |
Online Access: | http://www.infocomm-journal.com/znkx/CN/abstract/abstract171217.shtml |
Similar Items
-
基于脑机协同智能的情绪识别
by: 刘栋军, et al.
Published: (2021-03-01) -
基于深度卷积集成网络的视网膜多种疾病筛查和识别方法
by: 王禾扬, et al.
Published: (2021-09-01) -
基于深度可分离卷积网络的皮肤镜图像病灶分割方法
by: 崔文成, et al.
Published: (2020-12-01) -
基于高维特征表示的交通场景识别
by: 刘文华, et al.
Published: (2019-12-01) -
基于多尺度卷积神经网络特征融合的植株叶片检测技术
by: 李颖, et al.
Published: (2021-09-01)