国内刊号:31-1289/TP
国际刊号:1000-3428
发布日期:
作者:施荣华, 金鑫, 胡超
单位:1. 中南大学 计算机学院, 长沙 410083;2. 中南大学 大数据研究院, 长沙 410083
关键词:情感分析,门控循环神经网络,图卷积神经网络,句法依赖,注意力机制
基金:国家自然科学基金(61977062);教育部人文社会科学基金(17YJC880037);湖南省教育科学“十三五”规划项目(ND208739)。
方面级别文本情感分析旨在分析文本中不同方面所对应的情感趋向。传统基于神经网络的深度学习模型在文本情感分析的过程中,大多直接使用注意力机制而忽略了句法关系的重要性,即不能充分利用方面节点的上下文语义信息,导致情感趋向预测效果不佳。针对该问题,设计一种融合句法信息的图注意力神经网络模型,并将其应用于文本情感分析任务。利用预训练模型BERT进行词嵌入得到初始词向量,将初始词向量输入双向门控循环神经网络以增强特征向量与上下文信息之间的融合,防止重要上下文语义信息丢失。通过融合句法信息的图注意力网络加强不同方面节点之间的交互,从而提升模型的特征学习能力。在SemEval-2014数据集上的实验结果表明,该模型能够充分利用句法信息进行情感分析,其准确率较LSTM及其变种模型至少提升3%,对Restaurant评论进行情感分类预测时准确率高达83.3%。
来源:2022年第2期
《计算机工程》期刊编辑部