-
公开(公告)号:CN115757365A
公开(公告)日:2023-03-07
申请号:CN202111032307.6
申请日:2021-09-03
申请人: 全球能源互联网研究院有限公司 , 国网四川省电力公司 , 国家电网有限公司
IPC分类号: G06F16/215 , G06F16/2458 , G06N3/049 , G06N3/08
摘要: 本发明提供了一种多维时序数据异常检测方法、模型训练方法及装置,其中,多维时序数据异常检测模型训练方法包括:获取目标对象在预设时间段内各维度的训练时序数据;分别提取各维度的训练时序数据的特征;分别计算两两组合的训练时序数据的特征之间的相关性;根据各维度的训练时序数据的特征和两两组合的训练时序数据的特征之间的相关性建立时序相关图;将时序相关图输入图卷积网络,对图卷积网络进行训练,得到多维时序数据异常检测模型。通过实施本发明能够以更小的代价、更简单地得到的多维时序数据异常检测模型,并且利用本发明训练得到的多维时序异常检测模型对多维的时序数据进行异常检测时,准确性更高。
-
公开(公告)号:CN115481240A
公开(公告)日:2022-12-16
申请号:CN202110606566.9
申请日:2021-05-31
申请人: 全球能源互联网研究院有限公司 , 国网四川省电力公司 , 国家电网有限公司
摘要: 本发明提供了一种数据资产质量检测方法和检测装置,该方法包括:获取待检测数据资产清单;对待检测数据资产清单进行关键词提取,构建关键词语料库;基于预设自定义词库对关键词语料库中的关键词进行特征类型的标注,并利用模型自动标注,构建检测特征关键词库;按照标注的特征类型,对检测特征关键词库与待检测数据资产清单进行映射,生成各数据资产特征清单;基于各特征类型对应的预设检测规则清单,分别对各数据资产特征清单进行数据资产质量检测,生成质量检测结果。根据标注的特征作为检测规则选取的索引,当数据质量检验时,能够快速的匹配出合适的检测规则,从而减少大量的重复工作,提高了数据质检的工作效率。
-
公开(公告)号:CN113536066A
公开(公告)日:2021-10-22
申请号:CN202110803457.6
申请日:2021-07-16
申请人: 全球能源互联网研究院有限公司 , 国网四川省电力公司 , 国家电网有限公司
IPC分类号: G06F16/903 , G06K9/62 , G06N3/12
摘要: 本发明公开了一种数据异常检测算法确定方法、装置及计算机设备,该方法包括:获取待检测数据;根据预设特征提取工具对所述待检测数据进行特征提取,得到所述待检测数据的指纹信息;根据所述待检测数据的指纹信息与预设算法选择模型中的指纹信息进行特征匹配,根据与待检测数据的指纹信息最相似的指纹信息对应的异常检测算法确定待检测数据的异常检测算法。本发明通过对待检数据进行特征提取,与提前设置好的预设算法选择模型中的多个数据的指纹信息进行特征匹配,根据匹配度最高的指纹信息对应的异常检测算法确定该待检测数据的异常检测算法,可以实现根据数据特征变化,实时选择最适应该待检测数据的异常检测算法,场景适应能力强,通用性较好。
-
公开(公告)号:CN116150251A
公开(公告)日:2023-05-23
申请号:CN202111362055.3
申请日:2021-11-17
申请人: 全球能源互联网研究院有限公司 , 国网四川省电力公司 , 国家电网有限公司
摘要: 本发明公开了一种数据可视化展示方法、装置及电子设备,其中方法可以替代人工统计数据和制作报表,基于可视化面板显示模型,确定用于展示数据的可视化布局面板,在可视化布局面板上编辑数据信息,根据用户设置的关注数据,通过预警方式向用户发出提示信息,预览在可视化布局面上生成的可视化数据,进而可以显著提高数据统计以及数据分析效率,同时,还可以保障数据展示的质量,降低大量的人力资源。
-
公开(公告)号:CN113190543A
公开(公告)日:2021-07-30
申请号:CN202110565880.7
申请日:2021-05-24
申请人: 全球能源互联网研究院有限公司 , 国网四川省电力公司 , 国家电网有限公司
IPC分类号: G06F16/215 , G06F16/182
摘要: 本申请提供一种数据清洗方法、装置、电子设备及存储介质,该方法包括:获取待清洗数据;从待清洗数据提取目标字段;其中,目标字段包括设备标识字段、时间字段和/或计量字段;根据目标字段的字段内容与字段类型之间的对应关系,清洗待清洗数据。上述方案提供的方法是一种自动化的数据清洗方法,提高了数据清洗效率,为提高后续的数据分析效率奠定了基础。
-
公开(公告)号:CN110647829A
公开(公告)日:2020-01-03
申请号:CN201910864930.4
申请日:2019-09-12
申请人: 全球能源互联网研究院有限公司 , 国网重庆市电力公司电力科学研究院 , 国家电网有限公司 , 国网重庆市电力公司 , 国网上海市电力公司
摘要: 本发明提供了一种票据的文本识别方法及系统,该方法包括:获取票据文本图像;采用目标文本检测模型对票据文本图像进行文本区域检测,生成目标文本图像;采用目标文本识别算法对目标文本图像进行文本识别,生成文本识别结果。通过深度学习神经网络模型对票据文本图像进行检测与识别,本识别方法简单,无需手工提取特征,能够更快速的得到有效的文本检测区域,最终提高整体检测识别效率与精准度,实现图像文本数据的结构化提取和存储,为后续的检测分类提供有效的支撑,进一步提升票据归档分类的电子化和智能化水平。
-
公开(公告)号:CN110704873B
公开(公告)日:2021-05-25
申请号:CN201910910399.X
申请日:2019-09-25
申请人: 全球能源互联网研究院有限公司 , 国家电网有限公司
摘要: 本发明公开了一种防止敏感数据泄漏的方法及系统,其中方法包括:利用预设敏感字段发现算法建立原始敏感字段库;获取敏感数据全生命周期过程中的元数据;根据原始敏感字段库和元数据,解析敏感数据流转过程中的模型及代码,获取全链路中敏感数据的血缘关系和使用路径;利用敏感数据的血缘关系和使用路径,获取敏感数据使用清单;利用预设数据特征分析算法解析敏感数据转换过程,获取敏感数据检查清单;预警并审计敏感数据。本发明将原始敏感字段库、元数据管理、模型及代码解析、敏感数据血缘关系、敏感数据内容特征解析与预警审计结合,使敏感数据的流转和使用过程更直观、清晰,有效降低了数据的全生命周期中各环节敏感数据泄露的风险。
-
公开(公告)号:CN110704873A
公开(公告)日:2020-01-17
申请号:CN201910910399.X
申请日:2019-09-25
申请人: 全球能源互联网研究院有限公司 , 国家电网有限公司
摘要: 本发明公开了一种防止敏感数据泄漏的方法及系统,其中方法包括:利用预设敏感字段发现算法建立原始敏感字段库;获取敏感数据全生命周期过程中的元数据;根据原始敏感字段库和元数据,解析敏感数据流转过程中的模型及代码,获取全链路中敏感数据的血缘关系和使用路径;利用敏感数据的血缘关系和使用路径,获取敏感数据使用清单;利用预设数据特征分析算法解析敏感数据转换过程,获取敏感数据检查清单;预警并审计敏感数据。本发明将原始敏感字段库、元数据管理、模型及代码解析、敏感数据血缘关系、敏感数据内容特征解析与预警审计结合,使敏感数据的流转和使用过程更直观、清晰,有效降低了数据的全生命周期中各环节敏感数据泄露的风险。
-
公开(公告)号:CN110276672A
公开(公告)日:2019-09-24
申请号:CN201910435483.0
申请日:2019-05-23
申请人: 全球能源互联网研究院有限公司 , 国网重庆市电力公司电力科学研究院 , 国家电网有限公司 , 国网重庆市电力公司 , 国网上海市电力公司
摘要: 本发明公开了一种对账方法、装置、设备及计算机可读存储介质,其中对账方法包括:获取第一账目记录表、第二账目记录表和第三账目记录表并进行预处理,将第一账目记录表与第二账目记录表中第一预设字段的字段取值进行匹配,并将匹配成功的字段取值对应的数据样本移出;在剩余的第一账目记录表中筛选出多条数据样本,将多条数据样本的金额相加,得到重组后的金额;将重组后的金额与在第三账目记录表中筛选出的数据样本对应的金额进行匹配。本发明的技术方案,在一次对账过程中可以完成第一账目记录表与第二账目记录表和第三账目记录表两个账目记录表的对账操作,操作简单且匹配成功率高。
-
公开(公告)号:CN110119758A
公开(公告)日:2019-08-13
申请号:CN201910258374.6
申请日:2019-04-01
申请人: 全球能源互联网研究院有限公司 , 国网重庆市电力公司电力科学研究院 , 国家电网有限公司 , 国网重庆市电力公司 , 国网上海市电力公司
摘要: 本发明公开一种用电数据异常检测及模型训练方法、装置,该训练模型的方法包括:获取用电设备的训练用电数据,得到训练用电数据集合;提取训练用电数据集合中每个训练用电数据所对应的第一训练特征信息及第二训练特征信息,其中,第一训练特征信息用于指示各用电设备的用电特征,第二训练特征信息用于指示用电数据的分析结果特征;利用第一训练特征信息及第二训练特征信息对神经网络模型进行训练,得到用电数据异常检测模型。通过实施本发明,利用模型预测用电数据预测值,并与观测值求差值,将差值与所选阈值进行比较以判断用电数据是否异常。利用长短期记忆神经网络对用电数据进行预测,增加了数据预测的准确性,处理大规模数据计算效率提高。
-
-
-
-
-
-
-
-
-