微创手术智能服务方法及系统
    1.
    发明公开

    公开(公告)号:CN116630846A

    公开(公告)日:2023-08-22

    申请号:CN202310501933.8

    申请日:2023-05-05

    摘要: 本发明提供了一种微创手术智能服务方法及系统,涉及微创手术服务技术领域。本发明采用了一种新的手术视频摘要流行度预测方法。该方法考虑专业知识分享型平台中用户的主题偏好和发布医生的历史参与度对流行度预测的重要性,全面利用内容特征、主题特征和用户特征进行手术视频摘要流行度预测。同时考虑同一用户多次浏览行为对流行度的影响,将视频播放量和观看人数的加权和定义为视频流行度,使用权重更好地表示同主题和同发布医生的视频平均流行度。

    基于视频理解的手术器械、操作和组织智能识别方法

    公开(公告)号:CN116563759A

    公开(公告)日:2023-08-08

    申请号:CN202310502012.3

    申请日:2023-05-05

    摘要: 本发明提供了一种基于视频理解的手术器械、操作和组织智能识别方法,涉及微创手术行为识别技术领域。本发明基于多任务学习,能够同时识别器械、操作和组织。利用了器械特征图引导操作与组织特征图的提取,基于器械识别准确度高、稳定性强的特点,提高了识别的稳定性。同时充分利用手术先验知识,通过图卷积网络在语义层面上显式建模了器械、操作、组织的关联关系,这种关联关系通过空间语义注意力对齐模块进一步嵌入到图像特征提取网络和语义特征提取网络中,最终融合了视觉识别结果与关联识别结果,提升了识别的准确性。最后采用度量学习对三元组特征进行区分,并优化识别结果,显著降低了手术内镜视频中同时出现多个三元组时的误识别概率。

    微创手术视频摘要生成方法
    4.
    发明公开

    公开(公告)号:CN116567348A

    公开(公告)日:2023-08-08

    申请号:CN202310502017.6

    申请日:2023-05-05

    摘要: 本发明提供了一种微创手术视频摘要生成方法,涉及视频摘要生成技术领域。本发明提出了基于手术行为语义标签的帧级重要性估计,根据微创手术视频相邻帧手术行为的语义标签变化,估计帧级重要性分数,捕捉视频中包含更多有价值的手术信息,突破了现有方法提取手术视频关键内容的局限性。同时本发明基于变化点检测的镜头切分方法,以手术器械的消失或出现为原则对手术视频进行切分镜头,克服了视觉上手术视频没有镜头边界的缺陷。且多目标0,1规划方法选择镜头能保证生成的微创手术视频摘要具有较好的手术阶段完整性,更能满足医生对手术过程的需求。