计算机工程

作者：关日鹏, 况立群, 焦世超, 熊风光, 韩燮

单位：中北大学 大数据学院, 太原 030051

关键词：三维模型,特征融合,词嵌入,深度学习,特征提取

基金：国家自然科学基金（62106238）；山西省回国留学人员科研项目（2020-113）；山西省科技成果转化引导专项（202104021301055）。

在基于点云和图像的三维模型分类检索中，现有特征融合方法忽略了模态内的特征信息和模态间的互补信息，存在融合特征丢失的问题，且分类标签和预测特征之间缺乏高维相关性，检索准确率较低。针对该问题，提出一种多模态特征和词嵌入联合驱动的网络结构，以对三维模型进行分类检索。在特征提取过程中，利用特征提取器提取来自点云和视图的三维模型特征，通过共享空间来对齐不同模态的特征。在模态融合过程中，计算不同模态之间的余弦相似度以增强模态特征，将增强特征进行拼接得到融合特征。在模型特征分类的过程中，通过建立词嵌入模型与分类标签的高维相关性实现三维模型特征的统一表示和分类检索。在ModelNet10和ModelNet40数据集上进行实验，结果表明，该网络的平均检索精度均值分别达到92.9%和91.5%，可以获取精准的三维模型特征描述符，与VoxNet、SCIF、MVCNN等检索方法相比，其能显著提高三维模型的检索精度和分类准确率。

来源：2023年第4期

《计算机工程》期刊编辑部

查看计算机工程杂志2023年第4期