公开(公告)号：CN117973500B

公开(公告)日：2024-09-03

申请号：CN202410105437.5

申请日：2024-01-25

申请人： 江西理工大学

发明人： 于祥春 ,  张鼎文 ,  郑剑 ,  吴剑青

IPC分类号： G06N3/096 ,  G06N3/0495 ,  G06N3/045 ,  G06V10/82 ,  G06V10/26

摘要： 本申请提出一种基于注意力校正特征与边界约束的知识蒸馏方法及系统，方法包括注意力校正特征蒸馏法和边界约束蒸馏法，其中，注意力校正特征蒸馏法主要为：在教师中不引入辅助模块的情况下，利用校正因子蒸馏赋予学生的注意力校正因子以模仿教师的残差校正因子的能力，利用基于注意力的特征蒸馏通过模仿教师的残差校正特征来引导学生学习注意力校正特征；边界约束蒸馏法主要是将硬边界蒸馏和软边界蒸馏进行结合。本申请能够解决现有技术中，通过向教师引入辅助模块或者采用硬边界蒸馏方法难以得到一个轻量级的图像分割学生模型，并且所述两种方法训练得到的学生模型的性能和精度不足的问题。

公开(公告)号：CN117351210A

公开(公告)日：2024-01-05

申请号：CN202311467546.3

申请日：2023-11-07

申请人： 江西理工大学

发明人： 于祥春 ,  段忠建 ,  梁苗苗 ,  张鼎文 ,  郑剑 ,  邱流进 ,  许晴

IPC分类号： G06V10/26 ,  G06V10/82 ,  G06N3/045 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/0895 ,  G06N3/096

摘要： 本发明公开了一种医学图像的偏差‑方差分解分割方法，包括：获取医学图像；将所述医学图像输入至图像分割模型，获取分割后的医学图像，其中，所述图像分割模型采用教师网络和学生网络，所述教师网络和学生网络的蒸馏过程中的偏差和方差采用偏差‑方差理论进行解耦。本发明在发现数据不确定性的不可靠建模归因于知识蒸馏过程中的偏差‑方差耦合的基础上，致力于解耦知识蒸馏中的偏差和方差，从而获得了更优的学生网络分割模型。

公开(公告)号：CN117973500A

公开(公告)日：2024-05-03

申请号：CN202410105437.5

申请日：2024-01-25

申请人： 江西理工大学

发明人： 于祥春 ,  张鼎文 ,  郑剑 ,  吴剑青

IPC分类号： G06N3/096 ,  G06N3/0495 ,  G06N3/045 ,  G06V10/82 ,  G06V10/26

摘要： 本申请提出一种基于注意力校正特征与边界约束的知识蒸馏方法及系统，方法包括注意力校正特征蒸馏法和边界约束蒸馏法，其中，注意力校正特征蒸馏法主要为：在教师中不引入辅助模块的情况下，利用校正因子蒸馏赋予学生的注意力校正因子以模仿教师的残差校正因子的能力，利用基于注意力的特征蒸馏通过模仿教师的残差校正特征来引导学生学习注意力校正特征；边界约束蒸馏法主要是将硬边界蒸馏和软边界蒸馏进行结合。本申请能够解决现有技术中，通过向教师引入辅助模块或者采用硬边界蒸馏方法难以得到一个轻量级的图像分割学生模型，并且所述两种方法训练得到的学生模型的性能和精度不足的问题。

公开(公告)号：CN117036704A

公开(公告)日：2023-11-10

申请号：CN202311001756.3

申请日：2023-08-10

申请人： 江西理工大学

发明人： 于祥春 ,  张鼎文 ,  吴剑青 ,  梁苗苗 ,  郑剑

IPC分类号： G06V10/26 ,  G06V10/82 ,  G06V10/80 ,  G06V10/40 ,  G06N3/047 ,  G06N3/048 ,  G06N3/08

摘要： 本发明公开一种基于解耦3D自注意力网络的医学图像器官分割方法，包括，构建解耦3D自注意力网络模型，其中所述解耦3D自注意力网络模型包括医学图像语义分割网络及DSM模块，其中所述DSM模块插入到医学图像语义分割网络的主干网络，通过所述DSM模块对医学图像的特征进行3D自注意力处理；获取医学图像，通过解耦3D自注意力网络模型对医学图像进行分割，生成医学图像器官分割结果。通过上述技术方案，本发明能够提供一种解耦3D自注意力网络模型来更好地完成医学图像器官分割任务。