-
题名基于多模态组合模型的语音情感识别
被引量:2
- 1
-
-
作者
陈军
王力
徐计
-
机构
贵州大学大数据与信息工程学院
贵州工程应用技术学院信息工程学院
-
出处
《软件》
2019年第12期56-60,214,共6页
-
基金
国家自然科学基金项目(项目名:基于引领树结构的多粒度大数据分析理论与方法,批准号:61966005)
贵州省教育厅创新群体重大研究项目(项目名:精准扶贫多源异构数据融合研究与平台建设,批准号:黔教合KY字[2016]057)
-
文摘
语音情感识别在人机交互、人工智能(AI)、自然语言处理(NLP)、5G技术等方面扮演着重要的角色。为了克服单模态模型语音情感识别率低和手工调参的缺点,本文首先在Gaurav Sahu的基础模型上增加KNN、CNB和Adaboost单模态模型,提出多模态组合模型C3;然后应用排列组合方法通过计算机实现自动组合,克服Gaurav Sahu手工组合存在的不足;最后用超参数优化方法和交叉验证方法对网络模型进行训练和测试,解决手工调参存在的不足。在IEMOCAP数据集上对本文提出的C3进行实验,实验结果表明,C3比Gaurav Sahu提出的多模态组合模型E2的语音情感识别性能提升1.56%。
-
关键词
单模态模型
多模态组合模型
超参数优化
语音情感识别
交叉验证
自动组合
-
Keywords
Single modal model
multi-modal combination model
Hyper-parameter optimization
Speech emotion recognition
Cross-validation
Automatic combination
-
分类号
TN912.3
[电子电信—通信与信息系统]
-