一种事件相机辅助的高速运动物体形状恢复方法

    公开(公告)号:CN115131232B

    公开(公告)日:2024-08-13

    申请号:CN202210628067.4

    申请日:2022-06-06

    申请人: 武汉大学

    摘要: 本发明公开了一种事件相机辅助的高速运动物体形状恢复方法,属于计算机视觉领域。物体在下坠的过程中以极大的速度运动,若能对高速运动物体进行形状恢复,有助于对高空坠物等事故进行责任判定,对维护社会治安具有重要意义。本发明通过利用事件相机的高时间分辨率,弥补了传统光学相机在时间维度上的信息丢失。使用包含多迭代模块的去模糊网络引入高时间分辨率信息来迭代更新清晰图像的特征表示,完成了事件到光照强度变化的映射。使用边缘重建网络对初始去模糊结果进行后处理解决了模糊残留问题,并最终完成形状恢复任务。

    基于流形约束的事件相机图像重建方法及系统

    公开(公告)号:CN111798370B

    公开(公告)日:2023-11-28

    申请号:CN202010622690.X

    申请日:2020-06-30

    申请人: 武汉大学

    摘要: 本发明提供一种基于流形约束的事件相机图像重建方法,包括事件相机同时输出强度图像序列和事件流;对相机输出的每帧图像,根据该帧的时间戳提取曝光时间内的事件流,利用事件时间戳构建事件流形;建立事件的双积分模型,该模型建立构建相机捕获的图像与重建的灰度图像序列以及曝光时间内的事件流之间线性的关系;利用事件时间戳定义事件流形,结合事件的空间和时间信息,将重建问题转化为由事件流形定义的流形正则项下的变分模型,得到能量函数的离散化形式;通过求解流形约束下的能量最小化问题重建出高质量的灰度图像序列。本发明能解决事件相机图像重建中的运动模糊和噪声问题,联合传统图像帧和事件流重建出高质量的强度图像。

    一种基于时域注意力的时序遥感图像建筑物变化监测方法及系统

    公开(公告)号:CN116665050A

    公开(公告)日:2023-08-29

    申请号:CN202310606155.9

    申请日:2023-05-23

    申请人: 武汉大学

    摘要: 本发明提供的是一种基于时域注意力的时序遥感图像建筑物变化监测方法及系统。针对不同时相间图像表观风格差异大,目标变化多的问题,该方法在遥感单图分割模型中引入时域注意力,并通过替换归一化层以缓解风格差异导致的无法充分融合时序信息的问题。同时,加入了变化检测辅助损失,注入额外监督信息,以引导模型学习遥感时序图像中建筑物的变化模式。在模型完成语义分割后,加入后处理模块以实现建筑物的实例分割和变化监测。其中实例分割由改进的分水岭算法实现,变化监测由滑动平均序列实现。本方法能够有效利用时序信息,从而实现更加准确的遥感时序建筑物提取和变化监测。

    一种基于区域差异的时序SAR图像建筑区变化时间点检测方法

    公开(公告)号:CN115131660A

    公开(公告)日:2022-09-30

    申请号:CN202210661362.X

    申请日:2022-06-13

    申请人: 武汉大学

    摘要: 本发明提供的是一种基于区域差异的时序SAR图像建筑区变化时间点检测方法,该方法利用利用建筑区与周围环境的外观的不一致性来判断是否存在建筑。本发明采用VQ‑VAE模型对SAR图像进行特征提取。VQ‑VAE模型的训练是自监督形式的,不需要标注样本,其提取的特征也更适合聚类,更富有判别性。同时,本方法需要在每个时间序列中提供一个建筑区的掩膜,用于划出建筑区掩膜区域和周围环境区域,并在每个时相的SAR图像中分别比较建筑区掩膜和周围环境掩膜的特征的不相似性。最后通过滑动平均差检测法得到发生变化的时间点。本方法能够有效降低SAR图像中由于语义相同但外观不同导致的虚警。

    一种利用IMU增强的事件相机光流估计方法及系统

    公开(公告)号:CN111798485B

    公开(公告)日:2022-07-19

    申请号:CN202010620421.X

    申请日:2020-06-30

    申请人: 武汉大学

    摘要: 本发明提供一种利用IMU增强的事件相机光流估计方法及系统,首先利用EDI模型,将任意时刻模糊亮度图像重建为清晰亮度图像,再结合亮度恒定假设,建立基础光流模型,所述EDI表示基于事件的二重积分;然后将IMU作为约束加入基础光流模型,实现任意运动一致场景下的连续光流估计;当出现混合运动场景时将背景与前景分割开来处理,在估计背景光流时引入IMU约束,估计前景光流时引入稀疏约束,通过交替迭代更新方式联合估计混合运动场景的背景光流和前景光流,最后组合得到场景的整体连续光流。本发明适于应用的场景分包括单独背景运动或前景物体一致运动的运动一致场景,以及背景与前景的运动方向和大小不同的混合运动场景。

    一种基于事件相机系统的地面视角单目视觉里程计方法

    公开(公告)号:CN113379839B

    公开(公告)日:2022-04-29

    申请号:CN202110569036.1

    申请日:2021-05-25

    申请人: 武汉大学

    摘要: 本发明提出了一种基于事件相机系统的地面视角单目视觉里程计方法。本发明使用下视事件相机拍摄地面纹理,能够在高速、高动态场景中稳定运行,并且不受前视视角中遮挡和运动物体的干扰。本发明将事件相机输出的事件点沿时间轴压缩,以构建事件帧图像;在事件帧上提取Harris特征点并进行LK光流跟踪,以得到相邻事件帧间匹配的特征点对;根据反投影模型及运动模型求解相机的平移量和旋转量;将相机的平移量和旋转量作为光度误差最小化函数的优化初值,通过高斯牛顿法求解最小化函数得到优化后的平移量和旋转量。本发明将特征点法和直接法结合,实现了半直接法事件相机VO算法,提高了位姿估计的精度和稳定性。

    一种基于深度学习的事件相机车道线提取方法

    公开(公告)号:CN110728178B

    公开(公告)日:2022-03-15

    申请号:CN201910823262.0

    申请日:2019-09-02

    申请人: 武汉大学

    IPC分类号: G06V20/56 G06V10/82 G06N3/04

    摘要: 本发明提供的是一种基于深度学习的事件相机车道线提取方法。本发明提出了一种基于结构先验的网络,该网络通过利用全向切片卷积模块能够很好的捕获像素间的空间关系,特别是表现为细长形状的目标的空间关系。为了进一步提高车道线提取的精度,该发明引入了一种基于模特卡罗采样和最小二乘的多项式拟合的后处理方法,对车道线进行拟合,并最终完成车道线提取任务。

    基于事件相机的特征点匹配方法

    公开(公告)号:CN110414558B

    公开(公告)日:2021-07-20

    申请号:CN201910551377.9

    申请日:2019-06-24

    申请人: 武汉大学

    IPC分类号: G06K9/62

    摘要: 本发明公开了一种对已检测到的特征点提取描述子的方法,并使用生成的描述子对特征点进行匹配。本发明的目的在于解决传统的特征点描述子算法可能无法稳定适用于事件相机的问题,本发明利用事件相机的时间戳信息对特征点提取描述子会更好的利用事件相机的优势,使描述子信息更加丰富,使匹配结果更准确。