-
公开(公告)号:CN108959369A
公开(公告)日:2018-12-07
申请号:CN201810496314.3
申请日:2018-05-22
申请人: 国网浙江省电力有限公司电力科学研究院 , 国网浙江省电力有限公司 , 江苏瑞中数据股份有限公司
CPC分类号: G06Q50/06
摘要: 本发明公开了一种海量数据平台与大数据平台融合方法,该平台包括数据采集层、数据缓存层和数据存储层;该融合方法包括:数据采集层采用分布式消息队列Kafka机制,实现测点数据传输;数据缓存层采用REDIS键值型内存数据库,实现用户即席查询需求;数据存储层采用HBASE列式存储,结合测点数据时序特征,对测点数据特征进行列式存储,本发明提出的海量数据平台与大数据平台融合方法,实现了海量平台与大数据平台最佳融合,通过统一技术路线、统一技术支持、明确职责分工,实现大数据应用服务平台化,全面支撑各专业大数据应用需求,解决公司各专业的大数据应用需求,保障数据和业务的连续性。
-
公开(公告)号:CN108710696A
公开(公告)日:2018-10-26
申请号:CN201810500771.5
申请日:2018-05-23
申请人: 国网浙江省电力有限公司电力科学研究院 , 国网浙江省电力有限公司 , 江苏瑞中数据股份有限公司
CPC分类号: G06F8/315
摘要: 本发明公开了一种电网数据挖掘分析平台及其实现方法,该平台包括:表现层、控制层和数据层;所述表现层采用B/S模式,通过Jsp、Ajax、JQuery技术实现,供第三方交互;所述控制层采用Java语言实现,为表现层提供Java类及方法调用;所述数据层采用Java语言开发,采用JDBC数据库访问技术实现,支持对数据库访问,并对控制层提供数据访问接口,该电网数据挖掘分析平台及其实现方法解决了传统数据挖掘分析平台应用场景的单一性的问题,实现平台一体化,为建设高稳定性、自愈性、鲁棒性强的电网提供有效手段。
-
公开(公告)号:CN108959369B
公开(公告)日:2021-11-30
申请号:CN201810496314.3
申请日:2018-05-22
申请人: 国网浙江省电力有限公司电力科学研究院 , 国网浙江省电力有限公司 , 江苏瑞中数据股份有限公司
IPC分类号: G06F16/2455 , G06F16/25 , G06F16/22 , G06Q50/06
摘要: 本发明公开了一种海量数据平台与大数据平台融合方法,该平台包括数据采集层、数据缓存层和数据存储层;该融合方法包括:数据采集层采用分布式消息队列Kafka机制,实现测点数据传输;数据缓存层采用REDIS键值型内存数据库,实现用户即席查询需求;数据存储层采用HBASE列式存储,结合测点数据时序特征,对测点数据特征进行列式存储,本发明提出的海量数据平台与大数据平台融合方法,实现了海量平台与大数据平台最佳融合,通过统一技术路线、统一技术支持、明确职责分工,实现大数据应用服务平台化,全面支撑各专业大数据应用需求,解决公司各专业的大数据应用需求,保障数据和业务的连续性。
-
公开(公告)号:CN108052637B
公开(公告)日:2021-09-21
申请号:CN201711388434.3
申请日:2017-12-20
申请人: 江苏瑞中数据股份有限公司 , 南瑞集团有限公司
摘要: 本发明属于电力系统数据库技术领域,公开了一种电网时标量测数据接入全生命周期实时图文监控方法。本发明按照统一数据编码规范规定的数据格式生成规范化的测点信息,以数据采集点为中心,根据定义唯一测点名称标识,建立统一的主网设备与配网设备模型树,打破主网设备模型树与配网设备模型树之间的孤立,建立输变配一直到采集点模型之间的关系,将实时采集数据接入时序数据库,将接入状态信息以接入监控日志的形式记录到关系数据库,分别按不同的方式进行图文展示。本发明以图文的方式更好地展示了数据流转的真实性、时效性、完整性,同时可以对流转变化状态进行曲线分析和历史反演。
-
公开(公告)号:CN108052637A
公开(公告)日:2018-05-18
申请号:CN201711388434.3
申请日:2017-12-20
申请人: 江苏瑞中数据股份有限公司 , 南瑞集团有限公司
摘要: 本发明属于电力系统数据库技术领域,公开了一种电网时标量测数据接入全生命周期实时图文监控方法。本发明按照统一数据编码规范规定的数据格式生成规范化的测点信息,以数据采集点为中心,根据定义唯一测点名称标识,建立统一的主网设备与配网设备模型树,打破主网设备模型树与配网设备模型树之间的孤立,建立输变配一直到采集点模型之间的关系,将实时采集数据接入时序数据库,将接入状态信息以接入监控日志的形式记录到关系数据库,分别按不同的方式进行图文展示。本发明以图文的方式更好地展示了数据流转的真实性、时效性、完整性,同时可以对流转变化状态进行曲线分析和历史反演。
-
公开(公告)号:CN108229799B
公开(公告)日:2022-04-05
申请号:CN201711388462.5
申请日:2017-12-20
申请人: 江苏瑞中数据股份有限公司 , 南瑞集团有限公司
摘要: 本发明属于电力系统数据库技术领域,公开了一种多源异构电网运行实时数据接入系统与方法。本发明包括配置服务、接入调度器、接入插件、数据存储及数据源五个模块,首先制定测点名称的命名规则,然后创建接入任务,任务调度器开始周期检查任务调度参数,启动进程执行任务关联插件,插件根据配置的数据访问参数访问到待接入的数据,根据数据解析规则解析数据,根据测点创建规则构造测点名并检查该测点是否存在,存在则根据测点值规则写入实时数据,否则先创建该测点然后写入实时数据,最后当完成解析后,任务调度器释放进程资源。本发明能够实现电网多业务系统产生的实时数据不同方式不同频率的自动化接入,同时支持柔性扩展。
-
公开(公告)号:CN109614412B
公开(公告)日:2023-06-02
申请号:CN201811511520.3
申请日:2018-12-11
申请人: 江苏瑞中数据股份有限公司 , 南瑞集团有限公司
IPC分类号: G06F16/2455 , G06F16/25
摘要: 本发明公开了一种基于电力行业云上数据发布服务两级共享缓存分析方法,具体包括:步骤一:原始数据接入,通过业务系统及相关采集端进行数据采集进行分析处理并推送至服务器;步骤二:采用Socket长连接的通信方式将数据以报文格式推送至数据共享端;步骤三:对数据进行分析处理并写入Redis库中;步骤四:根据业务逻辑不同在Redis中设置不同分析策略并写入至MySQL中。步骤五:在MySQL中根据接收端需求不同对数据进行二次分析处理并推送至各个客户端;步骤六:各模块装载、系统初始化。
-
公开(公告)号:CN109525442A
公开(公告)日:2019-03-26
申请号:CN201811590531.5
申请日:2018-12-25
申请人: 国家电网有限公司客户服务中心 , 江苏瑞中数据股份有限公司 , 南瑞集团有限公司
摘要: 本发明公开了一种基于电力行业数据发布对象模型的工作流失败处理策略,包括:在服务端,将服务端的数据根据服务端与客户端的数据发布对象规则,将服务端的数据写入数据发布对象模型进行数据流处理;根据服务端与客户端的数据发布链路将经过流处理的数据通过数据发布对象平台下发至客户端;在客户端,将接收的流处理数据根据所述数据发布对象规则录入客户端。各个系统在数据上收/下发传输时均对数据流处理后进行数据发布,在服务端和客户端通过数据发布对象规则各自进行数据流处理。与传统方法相比,处理策略考虑了工作步骤之间的依赖关系,并且对工作步骤应用的具体实现方式进行了深层次分析,以确保全方位的对工作流的失败处理。
-
公开(公告)号:CN109614412A
公开(公告)日:2019-04-12
申请号:CN201811511520.3
申请日:2018-12-11
申请人: 江苏瑞中数据股份有限公司 , 南瑞集团有限公司
IPC分类号: G06F16/2455 , G06F16/25
摘要: 本发明公开了一种基于电力行业云上数据发布服务两级共享缓存分析策略,具体包括:步骤一:原始数据接入,通过业务系统及相关采集端进行数据采集进行分析处理并推送至服务器;步骤二:采用Socket长连接的通信方式将数据以报文格式推送至数据共享端;步骤三:对数据进行分析处理并写入Redis库中;步骤四:根据业务逻辑不同在Redis中设置不同分析策略并写入至MySQL中。步骤五:在MySQL中根据接收端需求不同对数据进行二次分析处理并推送至各个客户端;步骤六:各模块装载、系统初始化。
-
公开(公告)号:CN108229799A
公开(公告)日:2018-06-29
申请号:CN201711388462.5
申请日:2017-12-20
申请人: 江苏瑞中数据股份有限公司 , 南瑞集团有限公司
摘要: 本发明属于电力系统数据库技术领域,公开了一种多源异构电网运行实时数据接入系统与方法。本发明包括配置服务、接入调度器、接入插件、数据存储及数据源五个模块,首先制定测点名称的命名规则,然后创建接入任务,任务调度器开始周期检查任务调度参数,启动进程执行任务关联插件,插件根据配置的数据访问参数访问到待接入的数据,根据数据解析规则解析数据,根据测点创建规则构造测点名并检查该测点是否存在,存在则根据测点值规则写入实时数据,否则先创建该测点然后写入实时数据,最后当完成解析后,任务调度器释放进程资源。本发明能够实现电网多业务系统产生的实时数据不同方式不同频率的自动化接入,同时支持柔性扩展。
-
-
-
-
-
-
-
-
-