一种并行处理系统
    1.
    发明公开

    公开(公告)号:CN109508354A

    公开(公告)日:2019-03-22

    申请号:CN201811115764.X

    申请日:2018-09-25

    IPC分类号: G06F16/25 G06F9/54 G06F9/50

    摘要: 本发明提供了一种并行处理系统,能够根据模型实现并行采集数据的实时高效并行处理,并写入实时库。本发明架构主要包括分组并行采集,基于kafka的高性能总线,scada处理集群,模型服务及实时库集群。利用kafka分组、复制,弹性架构等技术实现了scada集群的天然负载均衡,scada集群依据模型信息对分组并行采集数据进行实时高速处理,模型服务采用完整数据对等服务集群模式,通过Haproxy实现软件负载均衡,使得scada集群可以动态、均衡获取模型信息,实时库采用redis集群,实现实时数据的高效写入。

    一种分布式数据存储方法和系统

    公开(公告)号:CN108833494A

    公开(公告)日:2018-11-16

    申请号:CN201810509003.6

    申请日:2018-05-24

    IPC分类号: H04L29/08

    摘要: 本发明提供一种分布式数据存储方法和系统,存储方法为:在数据存储区域设置第一数据库和第二数据库,表示数据之间关系的数据存入第一数据库;如数据调用的频率大于设定频率值,则将该数据存入缓存器;如果数据为实时数据,则将该数据存入第二数据库数据库。本发明所提供的技术方案,按照数据的类型对数据进行分布式存储,并将调用频率比较高的数据存储在缓存器中,方便对数据的调用并加快对常用数据的调用速率,解决由于数据数量大,种类多而造成数据调用实时性差的问题。

    一种支持动态扩展的电网监控系统

    公开(公告)号:CN112260398A

    公开(公告)日:2021-01-22

    申请号:CN202010989326.7

    申请日:2020-09-18

    IPC分类号: H02J13/00 H04L12/24 G06F9/455

    摘要: 本发明公开了一种支持动态扩展的电网监控系统,包括:终端设备从电网设备采集电网运行信息并转换为数据量;前置服务收集终端设备采集的数据并发送给SCADA服务;SCADA服务接收前置服务上送的数据进行处理,并将处理后的数据存储到实时库中;配置库存储配置数据;前置服务、SCADA服务通过消息总线进行通信,消息总线将前置服务与SCADA服务解耦,使得前置服务或SCADA服务的重新启动不影响SCADA服务或前置服务;当终端服务数据分批接入时,后接入数据通过增加前置服务和SCADA服务来处理,正在运行的前置和SCADA服务不受影响。通过将前置服务和SCADA服务解耦,使得二者之一重新启动时不会相应另一个服务,提高了电网监控系统的稳定性。

    一种分区集群系统的监测方法及装置

    公开(公告)号:CN106161090A

    公开(公告)日:2016-11-23

    申请号:CN201610546566.3

    申请日:2016-07-12

    IPC分类号: H04L12/24

    CPC分类号: H04L41/0663 H04L41/08

    摘要: 本发明涉及一种分区集群系统的监测方法及装置,本发明通过对分区集群系统的每个节点进行应用服务配置,使每个应用服务在节点上都是交错备份处理的,以保证每个应用服务都有主备服务存在;在集群系统每个节点上部署用于存储集群系统对应节点配置信息的sysmoni实时库,同时在每个节点上部署用于根据配置信息来管理节点各级元素的appmanager服务;各应用服务的应用进程在启动时向对应节点上的appmanager服务进行注册,并定时向其发送自身的状态信息,以实现对各节点应用服务进程的监视。本发明实现了对集群系统的运行状态的全面监测,大大提高了集群系统运行的透明度,增强了集群系统的可靠性。

    一种海量数据监控系统

    公开(公告)号:CN105071994A

    公开(公告)日:2015-11-18

    申请号:CN201510534232.X

    申请日:2015-08-27

    IPC分类号: H04L12/26 H04L29/08

    CPC分类号: H04L43/04 H04L67/10

    摘要: 本发明涉及一种海量数据监控系统,为多级集群架构,包括分成若干个分区的数据源、前置机集群、SCADA集群、操作员工作站和用于连接操作员工作站与SCADA集群的通信网络,基于数据源的每个分区,在前置机集群中相应的建立有前置机集群节点,在SCADA集群中相应的建立有SCADA集群节点,每个数据源的分区跟相应的前置机集群节点、SCADA集群节点形成一个单独的数据处理通道。本发明基于分区集群技术的海量数据监控系统,解决了行业应用中因数据量大而带来的数据采集监控难度较大的问题,实现了数据的分布式并行采集处理,提高了数据监控系统的数据处理容量、提升了数据处理速度、极大地扩展了系统的应用范围。

    一种支持动态扩展的电网监控系统

    公开(公告)号:CN112260398B

    公开(公告)日:2024-05-28

    申请号:CN202010989326.7

    申请日:2020-09-18

    摘要: 本发明公开了一种支持动态扩展的电网监控系统,包括:终端设备从电网设备采集电网运行信息并转换为数据量;前置服务收集终端设备采集的数据并发送给SCADA服务;SCADA服务接收前置服务上送的数据进行处理,并将处理后的数据存储到实时库中;配置库存储配置数据;前置服务、SCADA服务通过消息总线进行通信,消息总线将前置服务与SCADA服务解耦,使得前置服务或SCADA服务的重新启动不影响SCADA服务或前置服务;当终端服务数据分批接入时,后接入数据通过增加前置服务和SCADA服务来处理,正在运行的前置和SCADA服务不受影响。通过将前置服务和SCADA服务解耦,使得二者之一重新启动时不会相应另一个服务,提高了电网监控系统的稳定性。

    配电主站系统、历史数据存储方法及系统

    公开(公告)号:CN109858731A

    公开(公告)日:2019-06-07

    申请号:CN201811512922.5

    申请日:2018-12-11

    摘要: 本发明涉及配电主站系统、历史数据存储方法及系统,通过调用存储服务模块;若调用存储服务模块成功且存储服务模块写历史库成功,则由存储服务模块将需要存储的数据存储到历史库中;若无法通过存储服务模块存储数据时,则将需要存储的数据存储到本地文件中。在有新增的业务服务模块的情况下通过对应的方式进行数据存储,使数据存储具有通用性,降低了丢失数据的可能性,保证了整个系统的数据完备性。解决了现有技术中存储方法的丢失数据的可能性很大的问题。