计算机工程

作者：洪犇, 钱旭升, 申明磊, 胡冀苏, 耿辰, 戴亚康, 周志勇

单位：1. 南京理工大学 电子工程与光电技术学院, 南京 2100942. 中国科学院 苏州生物医学工程技术研究所, 江苏 苏州 215163

关键词：多模态图像,配准,分割,模态一致性监督,多尺度邻域描述符

基金：中国科学院青年创新促进会项目(2021324); 江苏省重点研发计划项目(BE2022049-2); 江苏省重点研发计划项目(BE2021053); 江苏省重点研发计划项目(BE2020625); 江苏省重点研发计划项目(BE2021612); 江苏省卫生健康委医学科研项目(M2020068); 苏州市医疗卫生科技创新项目(SKY2021031); 苏州市科技计划项目(SS202054); 丽水市科技计划项目(2020ZDYF09)

医学图像配准和分割是医学图像分析中的两项重要任务，将其相结合可以有效提升两者的精度，但现有的单模态图像联合配准分割框架难以适用于多模态图像。针对以上问题，提出基于模态一致性监督和多尺度邻域描述符的CT-MR图像联合配准分割框架，包含一个多模态图像配准网络和两个分割网络。联合配准分割框架利用多模态图像配准产生的形变场在两种模态的分割结果之间建立对应的形变关系，并设计模态一致性监督损失，通过两个分割网络互相监督的方式提升多模态分割的精度。在多模态图像配准网络中，构建多尺度模态独立邻域描述符以增强跨模态信息表征能力，并将该描述符作为结构性损失项加入配准网络，更加准确地约束多模态图像的局部结构对应关系。在118例肝脏CT-MR多模态图像数据集上的实验结果表明，在仅提供30%分割标签的情况下，该方法的肝脏配准Dice相似系数(DSC)达到94.66(±0.84)%，目标配准误差达到5.191(±1.342) mm，CT和MR图像的肝脏分割DSC达到94.68(±0.82)%和94.12(±1.06)%，优于对比的配准方法和分割方法。

来源：2023年第9期

《计算机工程》期刊编辑部

查看计算机工程杂志2023年第9期