计算机工程

北大核心,CA,INSPEC,JST,Pж(AJ)

国内刊号:31-1289/TP

国际刊号:1000-3428

计算机工程杂志2024年第3期:基于异构图分层学习的细粒度多文档摘要抽取

发布日期:

作者:翁裕源, 许柏炎, 蔡瑞初

单位:广东工业大学计算机学院, 广东 广州 510006

关键词:抽取式多文档摘要,细粒度建模,异构图,分层学习,语义关系,结构关系

基金:科技创新2030—“新一代人工智能”重大项目(2021ZD0111501); 国家优秀青年科学基金(62122022); 国家自然科学基金(61876043); 国家自然科学基金(61976052); 国家自然科学基金(62206064)

多文档摘要抽取的目标是在多个文档中提取共有关键信息,其对简洁性的要求高于单文档摘要抽取。现有的多文档摘要抽取方法通常在句子级别进行建模,容易引入较多的冗余信息。为了解决上述问题,提出一种基于异构图分层学习的多文档摘要抽取框架,通过层次化构建单词层级图和子句层级图来有效建模语义关系和结构关系。针对单词层级图和子句层级图这2个异构图的学习问题,设计具有不同层次更新机制的两层学习层来降低学习多种结构关系的难度。在单词层级图学习层,提出交替更新机制更新不同的粒度节点,以单词节点为载体通过图注意网络进行语义信息传递;在子句层级图学习层,提出两阶段分步学习更新机制聚合多种结构关系,第一阶段聚合同构关系,第二阶段基于注意力聚合异构关系。实验结果表明,与抽取式基准模型相比,该框架在Multi-news数据集上取得了显著的性能提升,ROUGE-1、ROUGE-2和ROUGE-L分别提高0.88、0.23和2.27,消融实验结果也验证了两层学习层及其层次更新机制的有效性。

来源:2024年第3期

《计算机工程》期刊编辑部

查看计算机工程杂志2024年第3期

联系我们

  • 地址:上海市嘉定区澄浏公路63号
  • 电话:(021) 67092217
  • E-mail:ecice06@ecict.com.cn

咨询工作人员