-
题名基于深度学习的多模态融合网民情感识别研究
被引量：20
- 1
-
-
作者
范涛
吴鹏
曹琪
-
机构
南京理工大学经济管理学院
中国科学院科技战略咨询研究院
-
出处
《信息资源管理学报》
CSSCI
2020年第1期39-48,共10页
-
基金
国家自然科学基金“突发事件网民负面情感的模型检测研究”(71774084)
“基于时间感知模型的学术主题检索与演化挖掘研究”(71503124)
国家社会科学基金“基于社会网络分析的网络舆情主题发现研究”(15BTQ063)的成果之一。
-
文摘
现有网民情感识别研究多基于文本这一单模态,缺乏结合网民所发的文本及附带的图片来识别网民情感的研究。本文基于深度学习设计多模态融合网民情感识别模型,利用词向量模型对文本进行表示,并构建BiLSTMs模型提取文本情感特征,构建基于迁移学习的微调CNNs提取图片情感特征;将提取的文本和图片情感特征进行特征层融合后,输入至SVM中,实现多模态融合网民情感识别,同时将构建的多模态融合网民情感识别模型(DNNs-SVM)与设计的基线模型做实验效果对比,基线模型分别是word2vec+BiLSTMs、BERT+BiLSTMs、CNNs、微调CNNs和DNNs。实验结果表明,融合文本和图片特征的多模态融合情感识别结果优于单模态情感识别结果,多模态融合DNNs-SVM模型均优于所设计的基线模型。
-
关键词
网民情感
多模态融合
情感识别
双向长短期记忆模型
微调卷积神经网络
网络舆情
舆情监测
-
Keywords
Sentiment of online users
Multimodal fusion
Sentiment recognition
BiLSTMs
fine-tuned cnns
Online public opinion
Public opinion monitoring
-
分类号
G350
[文化科学—情报学]
-
