-
公开(公告)号:CN110211097B
公开(公告)日:2021-06-08
申请号:CN201910398515.4
申请日:2019-05-14
申请人: 河海大学 , 华能澜沧江水电股份有限公司 , 华能集团技术创新中心有限公司
摘要: 本发明公开了一种基于Faster R‑CNN参数迁移的裂缝图像检测方法,方法详细步骤为:1)特征提取,将图片输入ResNet‑50网络提取特征;2)特征融合及候选区域生成,将所得特征图输入多任务增强RPN模型,并改善RPN模型的锚盒大小和尺寸以提高检测识别精度,生成候选区域;3)检测处理,将特征图和候选区域发送到感兴趣区域(ROI)池,完全连接(FC)层,然后将FC层输出分别连接到一个边界回归器和一个SVM分类器,得到目标的类别和位置。本发明解决大坝裂缝图像样本不足的问题,以及适应大坝在不同光照环境,不同长度裂缝的检测。
-
公开(公告)号:CN110211097A
公开(公告)日:2019-09-06
申请号:CN201910398515.4
申请日:2019-05-14
申请人: 河海大学 , 华能澜沧江水电股份有限公司 , 华能集团技术创新中心有限公司
摘要: 本发明公开了一种基于Faster R-CNN参数迁移的裂缝图像检测方法,方法详细步骤为:1)特征提取,将图片输入ResNet-50网络提取特征;2)特征融合及候选区域生成,将所得特征图输入多任务增强RPN模型,并改善RPN模型的锚盒大小和尺寸以提高检测识别精度,生成候选区域;3)检测处理,将特征图和候选区域发送到感兴趣区域(ROI)池,完全连接(FC)层,然后将FC层输出分别连接到一个边界回归器和一个SVM分类器,得到目标的类别和位置。本发明解决大坝裂缝图像样本不足的问题,以及适应大坝在不同光照环境,不同长度裂缝的检测。
-
公开(公告)号:CN110260914A
公开(公告)日:2019-09-20
申请号:CN201910371947.6
申请日:2019-05-06
申请人: 河海大学 , 华能澜沧江水电股份有限公司 , 华能集团技术创新中心有限公司
摘要: 本发明公开了一种基于测点时空特征的工程安全监测系统区域划分方法,包括测点时空特征表示和区域划分两个阶段;在测点时空特征表示阶段:采用一种时序降噪自动编码器,压缩高维监测数据表增测点时序特征,通过归一化方法表示测点空间特征(坐标位置信息、测点属性等)。在区域划分阶段:采用一种基于测点时空特征的区域划分方法,引入辅助目标变量优化区域划分目标函数,使区域划分结果反映结构体运行物理规律,将全局安全评判问题分治到局部单域上。本发明通过分析测点监测数据变化规律,实现对大坝运行工况综合评判,为工程安全分析提供决策依据。
-
公开(公告)号:CN113220919A
公开(公告)日:2021-08-06
申请号:CN202110535542.9
申请日:2021-05-17
申请人: 河海大学 , 华能澜沧江水电股份有限公司 , 华能集团技术创新中心有限公司
IPC分类号: G06F16/58 , G06F16/38 , G06K9/32 , G06K9/62 , G06F40/126 , G06F40/242 , G06F40/289
摘要: 本发明公开一种基于交叉注意力的大坝缺陷图像文本跨模态检索方法,包括:1)文本‑图像特征提取;2)文本‑图像交互特征提取,将图像特征图和文本特征向量输入到交叉注意力模块,提取每个图像特征图和整段文本的交互特征矩阵;3)文本‑图像特征图全局相似度计算,将交互特征矩阵使用余弦相似度计算得到相似矩阵,然后从文本检索和图像检索两个任务出发分别计算全局相似度,文本检索任务中,计算全局相似度时质量较高的图像特征图赋予更高的权重;4)最小化损失函数优化训练结果:采用改进的铰链三元排序函数作为损失函数,最小化排序函数来优化训练结果。本发明在大坝图像检索文本和大坝缺陷描述文本检索图像任务中取得了较好的检索效果。
-
公开(公告)号:CN113220919B
公开(公告)日:2022-04-22
申请号:CN202110535542.9
申请日:2021-05-17
申请人: 河海大学 , 华能澜沧江水电股份有限公司 , 华能集团技术创新中心有限公司
IPC分类号: G06F16/58 , G06F16/38 , G06V10/74 , G06V10/25 , G06F40/126 , G06F40/242 , G06F40/289
摘要: 本发明公开一种基于交叉注意力的大坝缺陷图像文本跨模态检索方法,包括:1)文本‑图像特征提取;2)文本‑图像交互特征提取,将图像特征图和文本特征向量输入到交叉注意力模块,提取每个图像特征图和整段文本的交互特征矩阵;3)文本‑图像特征图全局相似度计算,将交互特征矩阵使用余弦相似度计算得到相似矩阵,然后从文本检索和图像检索两个任务出发分别计算全局相似度,文本检索任务中,计算全局相似度时质量较高的图像特征图赋予更高的权重;4)最小化损失函数优化训练结果:采用改进的铰链三元排序函数作为损失函数,最小化排序函数来优化训练结果。本发明在大坝图像检索文本和大坝缺陷描述文本检索图像任务中取得了较好的检索效果。
-
公开(公告)号:CN110260914B
公开(公告)日:2020-06-19
申请号:CN201910371947.6
申请日:2019-05-06
申请人: 河海大学 , 华能澜沧江水电股份有限公司 , 华能集团技术创新中心有限公司
摘要: 本发明公开了一种基于测点时空特征的工程安全监测系统区域划分方法,包括测点时空特征表示和区域划分两个阶段;在测点时空特征表示阶段:采用一种时序降噪自动编码器,压缩高维监测数据表增测点时序特征,通过归一化方法表示测点空间特征(坐标位置信息、测点属性等)。在区域划分阶段:采用一种基于测点时空特征的区域划分方法,引入辅助目标变量优化区域划分目标函数,使区域划分结果反映结构体运行物理规律,将全局安全评判问题分治到局部单域上。本发明通过分析测点监测数据变化规律,实现对大坝运行工况综合评判,为工程安全分析提供决策依据。
-
公开(公告)号:CN117746510B
公开(公告)日:2024-05-28
申请号:CN202410181853.3
申请日:2024-02-19
申请人: 河海大学 , 南京荟英电子科技有限公司
IPC分类号: G06V40/20 , G06V10/46 , G06V10/62 , G06V10/764 , G06V10/82
摘要: 本发明公开了一种基于点云特征图的实时三维行为识别方法,涉及行为识别技术领域,首先将点云序列抽象为虚拟行为序列,在此基础上,提出了两种点云特征图,即点云外观图PCAM和点云运动图PCMM,以获得三维行为识别的时空外观结构和运动动态;本方法在三个行为识别数据集上进行了大量的实验,在NTU RGB+D 60数据集上实现了跨视图精度96.7%,在UTD‑MHAD数据集上实现了跨主题精度91.61%,在MSR Action3D数据集上实现了91.91%的精度,优于现有技术,从而有效地简化了点云序列分类任务的复杂性,同时保持了优异的识别性能。
-
公开(公告)号:CN117392760B
公开(公告)日:2024-04-23
申请号:CN202311698698.4
申请日:2023-12-12
申请人: 河海大学 , 南京荟英电子科技有限公司
IPC分类号: G06V40/20 , G06V20/40 , G06V10/44 , G06V10/62 , G06V10/74 , G06V10/764 , G06V10/80 , G06V10/82 , G16H20/30 , A61B5/11 , A61B5/00
摘要: 本发明公开一种基于折半交叉网络的健康指导方法和系统,包括如下步骤:构建物理层和数据处理层,通过摄像头采集动作视频并进行处理得到去噪深度图和时间梯度图;构建行为识别层:构建特征提取网络,通过特征提取得到深度特征图和时间梯度特征图;构建折半交叉注意力模型,计算得到特征向量;输入全连接层,并通过激活函数进行激活,通过分类器得到输出结果;构建控制层:根据输出结果建立行为与控制的匹配关系,确定每个动作对应的语音指令以及实现对用户的建议提示。采用本发明的健康指导方法,解决了数据维度过高和无关特征信息对模型性能产生影响的问题,增强了对人体行为时空特征的表述能力,提高了行为识别精度和颈椎康复指导系统的可靠性。
-
公开(公告)号:CN117714623A
公开(公告)日:2024-03-15
申请号:CN202311405693.8
申请日:2023-10-27
申请人: 河海大学 , 南京荟英电子科技有限公司
摘要: 本发明公开了一种基于分解运动补偿的数字视频稳像方法,首先计算抖动视频的运动路径、稳定性,结合视频深度将抖动视频划进行类别划分;然后利用网格流预测自适应路径优化、相似时空路径优化、平均滤波优化以及L1最优相机路径优化法对抖动的运动路径进行平滑优化,然后将对应的路径优化信息分别存储到四个翘曲变换的矩阵当中;在四个翘曲变换的矩阵中分别引入对应的权重系数然后进行融合,分别得到最终的变换矩阵;最后将各最终的变换矩阵通过翘曲操作应用到抖动视频序列中的每一帧当中,生成稳定的视频。本发明根据不同的视频类型采用不同的权重系数,在保证处理速度的同时减少画面失真,在扩大应用范围的同时有效提升了视频稳定的质量。
-
公开(公告)号:CN116543453A
公开(公告)日:2023-08-04
申请号:CN202310365076.3
申请日:2023-04-07
申请人: 河海大学 , 南京河研创科技有限公司
IPC分类号: G06V40/20 , G06V20/40 , G06V10/40 , G06V10/82 , G06V10/774 , G06N3/0442 , G06N3/0464 , G06N3/0895 , G06V10/764 , G06V10/80 , G08B21/02
摘要: 本发明公开一种基于时空信息的暴力行为的识别报警方法,包括如下步骤:构建物理层:采集动作视频并进行数据传输;构建数据处理层:对物理层中所得数据进行划分处理并生成动作特征图;根据数据处理层所得动作特征图计算人体运动中的时空特征信息;构建行为识别层:首先使用复合神经网络构建识别模型;然后对识别模型进行训练;最后将待识别数据输入训练后的识别模型中,得到输出结果;构建控制层:建立动作行为与报警关联库的匹配关系,得到自动识别指令,根据行为识别层的输出结果触发自动识别指令。本发明的报警识别方法为行为识别提供上下文信息从而有效区分相似动作,解决暴力行为识别滞后性问题,提高智能报警系统的可靠性和实时性。
-
-
-
-
-
-
-
-
-