-
公开(公告)号:CN104809473A
公开(公告)日:2015-07-29
申请号:CN201510218676.2
申请日:2015-04-30
CPC分类号: G06K9/6269 , G06Q50/06
摘要: 本发明提供一种面向电力在线采集数据的分类方法,所述方法包括以下步骤:(1)收集数据并构建数据库;(2)从原始数据库中选取数据和样本;(3)利用已整理好的数据训练线性SVM,并将训练结果保存;(4)通过训练好的模型判断事件是否为变压器故障事件;(5)解释分类结果,并调整电能质量。本发明将基于随机梯度下降算法的SVM分类器应用到变压器故障事件的分类识别中,可以有效解决电力系统实测数据的在线采分类问题。本发明采用随机梯度下降算法,通过每个样本来迭代更新一次,即使在样本量很大的情况,也可能只用其中几万条或者几千条的样本,就可以迭代到最优解。因此更适用于如今日益增长的电力在线采集数据处理的要求。
-
公开(公告)号:CN106897295B
公开(公告)日:2021-01-15
申请号:CN201510957776.7
申请日:2015-12-17
申请人: 国网智能电网研究院 , 国网山东省电力公司电力科学研究院 , 国网四川省电力公司信息通信公司 , 国家电网公司
IPC分类号: G06F16/783 , G06F16/71 , G06Q50/06
摘要: 本发明提供一种基于Hadoop的输电线路监控视频分布式检索方法,以Hadoop平台为基础,将海量视频数据存储分成不同的视频片段存储在Hadoop的Block中,辅之以OpenCV提取关键帧,经过关键帧与用户提交的示例图片的相似度对比,得到与示例图片最相似的N幅关键帧,获得与之相对应的视频片段,在Web界面展示检索结果,完成视频数据检索工作。本发明提供的分布式检索方法处理大容量数据具有快速、高效、可扩展的优点,解决了大数据量的输电线路监控视频检索的高性能需求问题。
-
公开(公告)号:CN106897295A
公开(公告)日:2017-06-27
申请号:CN201510957776.7
申请日:2015-12-17
申请人: 国网智能电网研究院 , 国网山东省电力公司电力科学研究院 , 国网四川省电力公司信息通信公司 , 国家电网公司
摘要: 本发明提供一种基于Hadoop的输电线路监控视频分布式检索方法,以Hadoop平台为基础,将海量视频数据存储分成不同的视频片段存储在Hadoop的Block中,辅之以OpenCV提取关键帧,经过关键帧与用户提交的示例图片的相似度对比,得到与示例图片最相似的N幅关键帧,获得与之相对应的视频片段,在Web界面展示检索结果,完成视频数据检索工作。本发明提供的分布式检索方法处理大容量数据具有快速、高效、可扩展的优点,解决了大数据量的输电线路监控视频检索的高性能需求问题。
-
公开(公告)号:CN104820717A
公开(公告)日:2015-08-05
申请号:CN201510264347.1
申请日:2015-05-22
申请人: 国网智能电网研究院 , 国家电网公司 , 国网山东省电力公司 , 江苏省电力公司信息通信分公司
IPC分类号: G06F17/30
CPC分类号: G06F16/1827 , G06F16/134
摘要: 本发明提供一种海量小文件存储及管理方法和系统,所述方法包括:存储海量小文件,并将元数据写入名称节点服务网络;名称节点服务网络管理元数据,实现对客户端访问请求响应。所述系统包括名称节点服务网络系统和海量小文件存储系统。本发明采用了对等计算技术,避免单点失效问题,提供基于关键字的路由查找方法,有效均衡网络负载,提高查询效率。
-
公开(公告)号:CN104809473B
公开(公告)日:2018-11-16
申请号:CN201510218676.2
申请日:2015-04-30
申请人: 全球能源互联网研究院 , 国网山东省电力公司 , 国家电网公司
IPC分类号: G06F17/30
摘要: 本发明提供一种面向电力在线采集数据的分类方法,所述方法包括以下步骤:(1)收集数据并构建数据库;(2)从原始数据库中选取数据和样本;(3)利用已整理好的数据训练线性SVM,并将训练结果保存;(4)通过训练好的模型判断事件是否为变压器故障事件;(5)解释分类结果,并调整电能质量。本发明将基于随机梯度下降算法的SVM分类器应用到变压器故障事件的分类识别中,可以有效解决电力系统实测数据的在线采分类问题。本发明采用随机梯度下降算法,通过每个样本来迭代更新一次,即使在样本量很大的情况,也可能只用其中几万条或者几千条的样本,就可以迭代到最优解。因此更适用于如今日益增长的电力在线采集数据处理的要求。
-
公开(公告)号:CN105812802A
公开(公告)日:2016-07-27
申请号:CN201410849400.X
申请日:2014-12-29
IPC分类号: H04N19/124 , H04N19/13
摘要: 本发明涉及一种基于稀疏编解码的电力大数据的压缩传输方法,所述方法包括(1)启动系统;(2)传送数据;(3)稀疏编码;(4)标量量化;(5)自适应算术编码;(6)保存编码;(7)判断是否调用原数据;(8)自适应算术解码;(9)反量化;(10)稀疏解码;(11)处理数据。本发明将输入的电力大数据转化为稀疏编码的方式进行输出。在数据的传送过程之中通过转化得到的存储量极小的数据编码。本发明能够有效降低数据的存储量,同时也便于找出数据的内在结构和本质特征,也有利于数据的备份和后续运算。
-
公开(公告)号:CN104820717B
公开(公告)日:2019-05-21
申请号:CN201510264347.1
申请日:2015-05-22
申请人: 全球能源互联网研究院 , 国家电网公司 , 国网山东省电力公司 , 江苏省电力公司信息通信分公司
IPC分类号: G06F16/13 , G06F16/182
摘要: 本发明提供一种海量小文件存储及管理方法和系统,所述方法包括:存储海量小文件,并将元数据写入名称节点服务网络;名称节点服务网络管理元数据,实现对客户端访问请求响应。所述系统包括名称节点服务网络系统和海量小文件存储系统。本发明采用了对等计算技术,避免单点失效问题,提供基于关键字的路由查找方法,有效均衡网络负载,提高查询效率。
-
公开(公告)号:CN104598565B
公开(公告)日:2018-08-14
申请号:CN201510011974.4
申请日:2015-01-09
申请人: 国家电网公司 , 中国电力科学研究院 , 全球能源互联网研究院
IPC分类号: G06F17/30
摘要: 本发明提供一种基于随机梯度下降算法的K均值大规模数据聚类方法,包括以下步骤:随机初始化K个聚类中心;采样数据样本,并将该数据样本划分到所属类型;对目标函数进行迭代;重复步骤1‑3,使得聚类中心收敛。本发明提供的基于随机梯度下降算法的K均值大规模数据聚类方法,大大提高了算法的执行效率,达到了更好的聚类效果。能够更加快速有效的对数据进行挖掘,该方法的提出为处理电力大数据以及其它数据问题提供了一种可能。
-
公开(公告)号:CN107437142A
公开(公告)日:2017-12-05
申请号:CN201710589547.3
申请日:2017-07-19
申请人: 全球能源互联网研究院 , 国网安徽省电力公司 , 国家电网公司
摘要: 本发明公开一种电网设备带电状态分析方法及装置,其中方法包括:构建电网设备的网络拓扑结构模型,网络拓扑结构模型包括供电起始设备、各级电网设备和目标设备;获取供电起始设备,并将供电起始设备标识为带电;通过判断当供电起始设备为电源设备时,向电源设备等级方向进行广度优先搜索各级电网设备直到没有遇到比当前电源设备等级高的电源设备或与本级设备相邻的下级设备为止;将各级电网设备标识为带电,并将与本级设备相邻的上级设备作为本级设备的父设备,即本级设备作为父设备的子设备,判断父设备为供电起始设备,获取目标设备的带电状态信息和供电路径。本发明通过逐个查找子设备的父设备,可快速获得目标电网设备的带电状态信息。
-
公开(公告)号:CN105844294A
公开(公告)日:2016-08-10
申请号:CN201610161721.X
申请日:2016-03-21
申请人: 全球能源互联网研究院 , 国网江苏省电力公司电力科学研究院 , 国家电网公司
CPC分类号: G06K9/6221 , G06Q50/06
摘要: 本发明提出了一种基于FCM聚类算法的用电行为分析方法,包括:(1)将用电数据从关系数据库拷贝到分布式文件系统HDFS中,确定聚类个数c和停止域ε;(2)根据上一次的聚类结果确定初始聚类中心,并将数据传输至参与分布式计算的数据节点;(3)对用电数据进行预处理,并产生键值对 ;(4)将所有的键值对 划分为若干个数据子集,并传输至Map函数计算;(5)将Map函数计算的结果传输至Reduce节点,Reduce任务将Map产生的中间键值根据聚类编号合并后进行计算,获得新的聚类中心;(6)重复步骤(2)~(5),直到隶属度矩阵满足停止域条件,算法结束,输出聚类结果。本发明对基于文件的海量历史用电数据进行直接计算并获得用电行为特征。
-
-
-
-
-
-
-
-
-