国内刊号:31-1289/TP
国际刊号:1000-3428
发布日期:
作者:薛振宇, 线岩团, 余正涛, 高盛祥, 普浏清
单位:1. 昆明理工大学 信息工程与自动化学院, 昆明 650500;2. 昆明理工大学 云南省人工智能重点实验室, 昆明 650500
关键词:实体识别,对抗迁移,双语词典,多粒度特征,序列特征
基金:国家自然科学基金(61972186,61762056,61472168);云南省重大科技专项计划(202002AD080001);云南省高新技术产业专项(201606)。
针对越南语事件标注语料稀缺且标注语料中未登陆词过多导致实体识别精度降低的问题,提出一种融合词典与对抗迁移的实体识别模型。将越南语作为目标语言,英语和汉语作为源语言,通过源语言的实体标注信息和双语词典提升目标语言的实体识别效果。采用词级别对抗迁移实现源语言与目标语言的语义空间共享,融合双语词典进行多粒度特征嵌入以丰富目标语言词的语义表征,再使用句子级别对抗迁移提取与语言无关的序列特征,最终通过条件随机场推理模块标注实体识别结果。在越南语新闻数据集上的实验结果表明,在源语言为英语和汉语的情况下,该模型相比主流的单语实体识别模型和迁移学习模型的实体识别性能有明显提升,并且在加入目标语义标注数据后,相比单语实体识别模型的F1值分别增加了19.61和18.73个百分点。
来源:2022年第3期
《计算机工程》期刊编辑部