一种多模态图像分割方法
摘要:
本申请提供一种多模态图像分割方法,该方法包括:提取多模态图像的初始特征图;采用解剖诱导的区域解耦器对初始特征图的不同区域解耦,得到解耦边界特征图和解耦语义特征图;在每个解剖子区域结构内,采用边界辅助的区域内耦合器分别耦合解耦边界特征图和解耦语义特征图,得到具有互补信息的更新的边界特征图和更新的语义特征图;基于每个解剖子区域结构中的更新的语义特征图,在不同解剖子区域结构之间使用跨区域耦合器,以使不同子区域之间的特征互补学习,得到最终特征图;最终特征图作为解码器的输入,并通过多个反卷积块生成最终分割结果。该方案结合多模态之间信息互补的优势,建立有效的分割模型,可降低计算成本和提升模型分割能力。
0/0