-
公开(公告)号:CN114972273B
公开(公告)日:2024-08-13
申请号:CN202210617706.7
申请日:2022-06-01
申请人: 合肥工业大学
IPC分类号: G06T7/00 , G06V10/774 , G06V10/82 , G06N3/0475 , G06N3/045 , G06N3/094
摘要: 本发明提供一种流水化产品数据集增强方法、系统、设备及存储介质,属于产品缺陷检测技术领域。流水化产品数据集增强方法包括:获取多张待训练的工业产品图像,制作工业产品图像数据集;基于工业产品图像数据集训练预设的检测模型,得到工业检测模型;根据工业检测模型构建并训练生成对抗网络模型,获得生成对抗网络模型的生成器模型和判别器模型;使用生成器模型构建预备数据集,并基于预备数据集和工业产品图像数据集训练判别器模型,若判别器模型符合数据增强条件,在工业产品图像数据集中加入预备数据集。解决了当前部分工业产品检测训练集过少、难以获取、质量不高的问题。
-
公开(公告)号:CN113222026B
公开(公告)日:2022-11-11
申请号:CN202110539044.1
申请日:2021-05-18
申请人: 合肥工业大学
摘要: 本发明提供了一种机务段场景视觉问答方法、系统及服务器,采用机车正常状态和动作前状态的两种机务段场景的图像数据,创建具有双重注意力与动态描述的第一视觉问答模型,通过对两个模块的联合训练,极大地提升在多个需要机车做出反应的场景变化对象同时出现以及场景内干扰物较多情况下的场景视觉问答能力、提高了复杂环境下机务段场景的检测效果,同时提升对于机务段场景视频的动态判断与描述能力,在需引起机车反应的机务段场景对象动态变化时,保持高稳定性的描述,满足了复杂度极高的工业的使用需求。
-
公开(公告)号:CN113312499A
公开(公告)日:2021-08-27
申请号:CN202110660681.4
申请日:2021-06-15
申请人: 合肥工业大学
摘要: 本发明公开一种基于知识图谱的电力安全预警方法及系统,包括:获取电力设备场景图像数据,并预处理电力设备场景图像数据为标记图像数据;将标记图像数据划分为训练样本和测试样本,检验并剔除标记图像数据中异常的图像数据,以得到数据集;通过基于知识图谱的电力安全预警模型训练样本,以得到训练后基于知识图谱的电力安全预警模型;通过训练后基于知识图谱的电力安全预警模型对所述测试样本进行处理,发送预警信息至危险信息检测设备,判定危险级别并向电力工作人员发出警报。本发明基于知识图谱对场景进行智能分析,不需要采用人工观测电力设备场景,预警效果良好。
-
公开(公告)号:CN113128415B
公开(公告)日:2023-09-29
申请号:CN202110437611.2
申请日:2021-04-22
申请人: 合肥工业大学
摘要: 本发明提供了一种环境辨别方法、系统、设备及存储介质,涉及视频问答技术领域,环境辨别方法包括:在采集到环境问题时,实时采集一预设时长的环境视频;根据环境视频中每一帧的环境图像,得到环境图像特征,并提取环境问题的语义特征,得到问题文本特征;将环境图像特征和问题文本特征进行加权融合,得到融合特征;将融合特征输入环境辨别模型,环境辨别模型根据融合特征,采用对应的激活函数和损失函数,得到预测答案。本发明能够在盲人提出问题时,及时的进行环境的辨别和反馈,使得具有视觉障碍的人群能感知到环境信息;且在交互技术中应用了视频问答技术,使得环境辨别的准确度大大提高,输出的辨别结果与实际情况更符合。
-
公开(公告)号:CN113095331A
公开(公告)日:2021-07-09
申请号:CN202110436318.4
申请日:2021-04-22
申请人: 合肥工业大学
摘要: 本发明提供一种电力设备外观缺陷的视觉问答方法,包括步骤:获取电力设备外观缺陷的图像,并对所述图像进行预处理;对处理后的所述图像进行特征提取,得到图像特征;根据所述图像,获取与所述图像相关的问题信息,并对所述问题信息进行特征提取,得到文本特征;基于双线性池化网络,将所述图像特征与所述文本特征进行融合,得到多模态特征;建立视觉问答模型并对其进行训练,得到训练后的所述视觉问答模型;将所述多模态特征输入训练后的所述视觉问答模型中,以得到视觉问答结果。本发明提供的一种电力设备外观缺陷的视觉问答方法,能通过图像对电力设备的外观缺陷进行筛选和评估,从而能够实时监控电力设备的运行状态。
-
公开(公告)号:CN113222026A
公开(公告)日:2021-08-06
申请号:CN202110539044.1
申请日:2021-05-18
申请人: 合肥工业大学
摘要: 本发明提供了一种机务段场景视觉问答方法、系统及服务器,采用机车正常状态和动作前状态的两种机务段场景的图像数据,创建具有双重注意力与动态描述的第一视觉问答模型,通过对两个模块的联合训练,极大地提升在多个需要机车做出反应的场景变化对象同时出现以及场景内干扰物较多情况下的场景视觉问答能力、提高了复杂环境下机务段场景的检测效果,同时提升对于机务段场景视频的动态判断与描述能力,在需引起机车反应的机务段场景对象动态变化时,保持高稳定性的描述,满足了复杂度极高的工业的使用需求。
-
公开(公告)号:CN113312499B
公开(公告)日:2022-10-04
申请号:CN202110660681.4
申请日:2021-06-15
申请人: 合肥工业大学
IPC分类号: G06F16/36 , G06F16/33 , G06V10/74 , G06V10/774 , G06V10/82 , G06N3/04 , G06N3/08 , G06Q50/06
摘要: 本发明公开一种基于知识图谱的电力安全预警方法及系统,包括:获取电力设备场景图像数据,并预处理电力设备场景图像数据为标记图像数据;将标记图像数据划分为训练样本和测试样本,检验并剔除标记图像数据中异常的图像数据,以得到数据集;通过基于知识图谱的电力安全预警模型训练样本,以得到训练后基于知识图谱的电力安全预警模型;通过训练后基于知识图谱的电力安全预警模型对所述测试样本进行处理,发送预警信息至危险信息检测设备,判定危险级别并向电力工作人员发出警报。本发明基于知识图谱对场景进行智能分析,不需要采用人工观测电力设备场景,预警效果良好。
-
公开(公告)号:CN114972273A
公开(公告)日:2022-08-30
申请号:CN202210617706.7
申请日:2022-06-01
申请人: 合肥工业大学
IPC分类号: G06T7/00 , G06V10/774 , G06V10/82 , G06N3/04 , G06N3/08
摘要: 本发明提供一种流水化产品数据集增强方法、系统、设备及存储介质,属于产品缺陷检测技术领域。流水化产品数据集增强方法包括:获取多张待训练的工业产品图像,制作工业产品图像数据集;基于工业产品图像数据集训练预设的检测模型,得到工业检测模型;根据工业检测模型构建并训练生成对抗网络模型,获得生成对抗网络模型的生成器模型和判别器模型;使用生成器模型构建预备数据集,并基于预备数据集和工业产品图像数据集训练判别器模型,若判别器模型符合数据增强条件,在工业产品图像数据集中加入预备数据集。解决了当前部分工业产品检测训练集过少、难以获取、质量不高的问题。
-
公开(公告)号:CN113128415A
公开(公告)日:2021-07-16
申请号:CN202110437611.2
申请日:2021-04-22
申请人: 合肥工业大学
摘要: 本发明提供了一种环境辨别方法、系统、设备及存储介质,涉及视频问答技术领域,环境辨别方法包括:在采集到环境问题时,实时采集一预设时长的环境视频;根据环境视频中每一帧的环境图像,得到环境图像特征,并提取环境问题的语义特征,得到问题文本特征;将环境图像特征和问题文本特征进行加权融合,得到融合特征;将融合特征输入环境辨别模型,环境辨别模型根据融合特征,采用对应的激活函数和损失函数,得到预测答案。本发明能够在盲人提出问题时,及时的进行环境的辨别和反馈,使得具有视觉障碍的人群能感知到环境信息;且在交互技术中应用了视频问答技术,使得环境辨别的准确度大大提高,输出的辨别结果与实际情况更符合。
-
-
-
-
-
-
-
-