-
公开(公告)号:CN111241056A
公开(公告)日:2020-06-05
申请号:CN201911410184.8
申请日:2019-12-31
申请人: 国网浙江省电力有限公司电力科学研究院 , 国网浙江省电力有限公司 , 中国电力科学研究院有限公司 , 浙江华云信息科技有限公司 , 国家电网有限公司
摘要: 本发明公开了一种基于决策树模型的电力用能数据存储优化方法,涉及一种电力数据存储领域,对于高频采集、低实时性业务场景的数据,已有的高效存储方法不能满足要求。本发明基于适应于HBase多存储格式进行特点分析,将采集实际应用场景划分,通过决策树模型选择合适的数据存储格式,选出最优的HBase存储方式,以此来优化高频采集数据存储空间。本技术方案采用多种格式的数据存储方式,根据不同的情况择优进行存储,弥补目前对于高频采集数据存储空间优化的不足,节省电力用能数据在大数据平台存储资源空间,提高HBase读写性;解决电力用能数据存储问题,为电力用能提供一个规范的HBase存储优化方法,具有易实现的、高效的特点。
-
公开(公告)号:CN111241056B
公开(公告)日:2024-03-01
申请号:CN201911410184.8
申请日:2019-12-31
申请人: 国网浙江省电力有限公司营销服务中心 , 国网浙江省电力有限公司 , 中国电力科学研究院有限公司 , 浙江华云信息科技有限公司 , 国家电网有限公司
摘要: 本发明公开了一种基于决策树模型的电力用能数据存储优化方法,涉及一种电力数据存储领域,对于高频采集、低实时性业务场景的数据,已有的高效存储方法不能满足要求。本发明基于适应于HBase多存储格式进行特点分析,将采集实际应用场景划分,通过决策树模型选择合适的数据存储格式,选出最优的HBase存储方式,以此来优化高频采集数据存储空间。本技术方案采用多种格式的数据存储方式,根据不同的情况择优进行存储,弥补目前对于高频采集数据存储空间优化的不足,节省电力用能数据在大数据平台存储资源空间,提高HBase读写性;解决电力用能数据存储问题,为电力用能提供一个规范的HBase(56)对比文件CN 110490329 A,2019.11.22CN 110555058 A,2019.12.10US 2006195415 A1,2006.08.31US 2011099205 A1,2011.04.28US 2013166568 A1,2013.06.27US 6442561 B1,2002.08.27WO 0195044 A2,2001.12.13王静红,王熙照,邵艳华,王伍伶.决策树算法的研究及优化.微机发展.2004,(第09期),全文.刘利;何先平.ID3决策树算法的改进.池州学院学报.2008,(第05期),全文.
-
公开(公告)号:CN110022226A
公开(公告)日:2019-07-16
申请号:CN201910165447.7
申请日:2019-03-05
申请人: 国网浙江省电力有限公司 , 中国电力科学研究院有限公司 , 浙江华云信息科技有限公司 , 国家电网有限公司
摘要: 本发明公开了一种基于面向对象的数据采集系统及采集方法,涉及电力系统数据采集领域。目前,电能采集过程中出现的拓展性、复用性和灵活性方面不足。本发明包括网关集群、通信前置集群、业务处理器集群、数据总线、入库服务模块、海量数据分析模块、数据存储模块;本技术方案采用分布式弹性架构设计,运用流处理、消息中间件、分布式存储与并行计算等技术,重构电力数据采集系统,从存储能力、计算性能、数据处理速度和智能分析等方面进行极大地提升,为支撑用电营销智能分析、服务业务创新、拓展专业应用和提高供电服务水平等方面提供了有力保障。
-
公开(公告)号:CN110022226B
公开(公告)日:2023-04-04
申请号:CN201910165447.7
申请日:2019-03-05
申请人: 国网浙江省电力有限公司 , 中国电力科学研究院有限公司 , 浙江华云信息科技有限公司 , 国家电网有限公司
IPC分类号: H04L67/1004 , H04L67/1097 , H04L67/12 , H04L41/0233 , H04L41/0631 , H04L67/568 , H04L69/22
摘要: 本发明公开了一种基于面向对象的数据采集系统及采集方法,涉及电力系统数据采集领域。目前,电能采集过程中出现的拓展性、复用性和灵活性方面不足。本发明包括网关集群、通信前置集群、业务处理器集群、数据总线、入库服务模块、海量数据分析模块、数据存储模块;本技术方案采用分布式弹性架构设计,运用流处理、消息中间件、分布式存储与并行计算等技术,重构电力数据采集系统,从存储能力、计算性能、数据处理速度和智能分析等方面进行极大地提升,为支撑用电营销智能分析、服务业务创新、拓展专业应用和提高供电服务水平等方面提供了有力保障。
-
公开(公告)号:CN111680046A
公开(公告)日:2020-09-18
申请号:CN202010806685.4
申请日:2020-08-12
申请人: 国网浙江省电力有限公司营销服务中心 , 中国电力科学研究院有限公司 , 浙江华云信息科技有限公司
摘要: 本申请实施例提出的用于高频电力数据的快速存储方法,包括对电力数据中的采集时间格式进行一致化处理,基于排序后电力数据中的设备编号不同将电力数据分配至不同的时间预估进程;在每个时间预估进程中对每个电力数据的分类存储时间进行预估,按电力数据分类存储时间总和近似相等的原则对电力数据进行整合打包得到电力数据包;将得到的电力数据包按数据流的方式进行实时入库存储。通过对电力数据进行采集时间一致化的预处理步骤,使得电力数据具有可被统一处理的前提条件,接着对多组电力数据进行基于存储时间总和近似的整合打包处理,使得每个电力数据包对外呈现出存储时长基本相等的效果,防止少数电力数据存储过程时间过长影响整体存储速率。
-
公开(公告)号:CN111680046B
公开(公告)日:2020-10-30
申请号:CN202010806685.4
申请日:2020-08-12
申请人: 国网浙江省电力有限公司营销服务中心 , 中国电力科学研究院有限公司 , 浙江华云信息科技有限公司
摘要: 本申请实施例提出的用于高频电力数据的快速存储方法,包括对电力数据中的采集时间格式进行一致化处理,基于排序后电力数据中的设备编号不同将电力数据分配至不同的时间预估进程;在每个时间预估进程中对每个电力数据的分类存储时间进行预估,按电力数据分类存储时间总和近似相等的原则对电力数据进行整合打包得到电力数据包;将得到的电力数据包按数据流的方式进行实时入库存储。通过对电力数据进行采集时间一致化的预处理步骤,使得电力数据具有可被统一处理的前提条件,接着对多组电力数据进行基于存储时间总和近似的整合打包处理,使得每个电力数据包对外呈现出存储时长基本相等的效果,防止少数电力数据存储过程时间过长影响整体存储速率。
-
公开(公告)号:CN112597440B
公开(公告)日:2024-07-05
申请号:CN202011503212.3
申请日:2020-12-17
申请人: 国网浙江省电力有限公司 , 国网浙江省电力有限公司营销服务中心 , 国网浙江省电力有限公司信息通信分公司 , 浙江华云信息科技有限公司 , 国家电网有限公司
IPC分类号: G06F17/18 , G06Q10/0639 , G06Q40/00 , G06Q50/06
摘要: 本发明公开了一种基于金融技术指标的用电异动分析方法,涉及用电异动分析领域。目前用电数据异动分析大多局限于挖掘用电数据的异常情况,难以捕捉由于企业生产改造、经济运行等原因引起的异动情况。本发明通过十字过滤线、零滞后异同移动平均线、布林线指标刻画用电负荷序列的特征,并适应性地设置指标参数满足异动分析任务的具体场景,根据同行业下指标概率分布图设定合理阈值,将超出指标阈值的定性为异动,有效描述负荷曲线特征,实现对异动现象的有效抓取,并且保证异动分析结果具有一定可解释性。能够准确有效地筛选出用电数据的显著异常变化;并通过辅助布林线指标捕获用电突变的检测,实现对异动的抓取工作,进一步保证异动分析的有效性。
-
公开(公告)号:CN112597440A
公开(公告)日:2021-04-02
申请号:CN202011503212.3
申请日:2020-12-17
申请人: 国网浙江省电力有限公司 , 国网浙江省电力有限公司营销服务中心 , 国网浙江省电力有限公司信息通信分公司 , 浙江华云信息科技有限公司 , 国家电网有限公司
摘要: 本发明公开了一种基于金融技术指标的用电异动分析方法,涉及用电异动分析领域。目前用电数据异动分析大多局限于挖掘用电数据的异常情况,难以捕捉由于企业生产改造、经济运行等原因引起的异动情况。本发明通过十字过滤线、零滞后异同移动平均线、布林线指标刻画用电负荷序列的特征,并适应性地设置指标参数满足异动分析任务的具体场景,根据同行业下指标概率分布图设定合理阈值,将超出指标阈值的定性为异动,有效描述负荷曲线特征,实现对异动现象的有效抓取,并且保证异动分析结果具有一定可解释性。能够准确有效地筛选出用电数据的显著异常变化;并通过辅助布林线指标捕获用电突变的检测,实现对异动的抓取工作,进一步保证异动分析的有效性。
-
公开(公告)号:CN111680074A
公开(公告)日:2020-09-18
申请号:CN201911403417.1
申请日:2019-12-31
申请人: 国网浙江省电力有限公司 , 国网浙江省电力有限公司信息通信分公司 , 浙江华云信息科技有限公司 , 国家电网有限公司
IPC分类号: G06F16/2458 , G06F16/26 , G06Q50/06
摘要: 本发明公开了一种基于聚类算法的电力采集负荷漏点特征挖掘方法,涉及电力信息采集领域。目前在电力负荷数据采集过程中,常常出现数据采集不成功的情况,出现某些时刻用户负荷数据缺失,形成漏点现象,现有系统中的漏电采集采集精确度不高,采集成功率相对较低,掌握漏点情况信息不完善。本方法过程为:采集负荷数据;提取漏点数据;通过漏点数据提取漏点特征指标;对漏点数据指标进行聚类分析形成聚类类别特征;最后提取用户的漏点特征。通过负荷采集漏点结果数据以及采集过程行为数据进行分析,可以深入掌握用户漏点情况,及时发现设备漏点特征,提高采集成功率。
-
公开(公告)号:CN109829571A
公开(公告)日:2019-05-31
申请号:CN201910029664.3
申请日:2019-01-11
申请人: 国网浙江省电力有限公司 , 国网浙江省电力有限公司宁波供电公司 , 浙江华云信息科技有限公司 , 国家电网有限公司
摘要: 本发明公开了一种基于多表融合数据的用户短期用电量预测方法,属于电力技术领域。现有的用户用能之间存在着一定的相关性。如果能够充分地挖掘用户用能之间的相关性,就可以有效地提高预测的精度。本发明首先通过模糊聚类方法选取相似日,然后用这些相似日作为支持向量机的训练样本,对支持向量机参数进行优化,得到训练后的模型,用于对用户用电量进行预测;本发明能够充分地挖掘用户用能之间的相关性,合理利用多表融合数据,有效地提高预测的精度。本发明充分考虑了各种用电量的影响因素,有效提高预测的精度,减少了训练样本数量,对用户用电异常行为检测具有重要的意义。
-
-
-
-
-
-
-
-
-