一种运动信息辅助的视觉单目标跟踪方法

    公开(公告)号:CN116309683A

    公开(公告)日:2023-06-23

    申请号:CN202211532172.4

    申请日:2022-12-01

    摘要: 本发明属于机器学习、视觉目标跟踪领域,提供了一种运动信息辅助的视觉单目标跟踪方法。本发明分别对跟踪过程中的相机运动和目标运动进行建模。对于相机运动建模方法,本发明使用特征点匹配算法计算出相邻帧间变换矩阵,并给出由相机运动导致的目标偏移量。对于目标运动建模方法,本发明使用卷积‑长短时记忆网络通过目标历史运动信息,估计目标未来的速度和位置。本发明在引入运动信息进行辅助跟踪后,可以显著提高跟踪算法应对光照变化,遮挡等挑战的能力,提升跟踪算法鲁棒性,并且具有较低的计算量,能够达到实时跟踪需求。

    一种基于共显著性学习的弱监督目标跟踪方法

    公开(公告)号:CN118262275B

    公开(公告)日:2024-07-23

    申请号:CN202410669172.1

    申请日:2024-05-28

    摘要: 本发明属于机器学习、计算机视觉、目标跟踪领域,公开了一种基于共显著性学习的弱监督目标跟踪方法,通过设计弱监督共显著性注意力模块,嵌入基准跟踪算法中,实现模型的弱监督训练。本发明能够使现有基准跟踪算法在降低约30倍训练标注数据的使用情况下,获得与基准跟踪算法相近或更优的性能,有效地解决了现有基准跟踪算法对大规模标注数据的依赖问题,降低了现有模型的训练成本,并缓解了现有跟踪训练数据集的迫切需求。

    一种基于共显著性学习的弱监督目标跟踪方法

    公开(公告)号:CN118262275A

    公开(公告)日:2024-06-28

    申请号:CN202410669172.1

    申请日:2024-05-28

    摘要: 本发明属于机器学习、计算机视觉、目标跟踪领域,公开了一种基于共显著性学习的弱监督目标跟踪方法,通过设计弱监督共显著性注意力模块,嵌入基准跟踪算法中,实现模型的弱监督训练。本发明能够使现有基准跟踪算法在降低约30倍训练标注数据的使用情况下,获得与基准跟踪算法相近或更优的性能,有效地解决了现有基准跟踪算法对大规模标注数据的依赖问题,降低了现有模型的训练成本,并缓解了现有跟踪训练数据集的迫切需求。

    一种基于蒸馏的轻量化无人机单目标跟踪方法

    公开(公告)号:CN118379332B

    公开(公告)日:2024-08-16

    申请号:CN202410830906.X

    申请日:2024-06-26

    摘要: 本发明提供一种基于蒸馏的轻量化无人机单目标跟踪方法,属于目标跟踪领域。本发明的主干网络为一个轻量化的ViT‑Base模型,其层数和通道数分别为3和128,总参数量仅为1.428M。轻量化后的ViT‑Base模型大大减少了在推理过程中的时间消耗和内存占用,从而达到模型加速和轻量化的目的。为了有效提高模型的性能,本发明采用多层特征蒸馏的方法,将轻量化模型作为学生模型,ViT‑Base大模型作为教师模型完成模型训练。轻量化模型在训练之初加载预训练的MAE权重参数完成模型初始化。加载预训练权重参数,大大提高了模型的收敛速度并有效提高了模型的泛化性和鲁棒性。