一种并行处理系统
    5.
    发明公开

    公开(公告)号:CN109508354A

    公开(公告)日:2019-03-22

    申请号:CN201811115764.X

    申请日:2018-09-25

    IPC分类号: G06F16/25 G06F9/54 G06F9/50

    摘要: 本发明提供了一种并行处理系统,能够根据模型实现并行采集数据的实时高效并行处理,并写入实时库。本发明架构主要包括分组并行采集,基于kafka的高性能总线,scada处理集群,模型服务及实时库集群。利用kafka分组、复制,弹性架构等技术实现了scada集群的天然负载均衡,scada集群依据模型信息对分组并行采集数据进行实时高速处理,模型服务采用完整数据对等服务集群模式,通过Haproxy实现软件负载均衡,使得scada集群可以动态、均衡获取模型信息,实时库采用redis集群,实现实时数据的高效写入。

    配电主站系统、历史数据存储方法及系统

    公开(公告)号:CN109858731A

    公开(公告)日:2019-06-07

    申请号:CN201811512922.5

    申请日:2018-12-11

    摘要: 本发明涉及配电主站系统、历史数据存储方法及系统,通过调用存储服务模块;若调用存储服务模块成功且存储服务模块写历史库成功,则由存储服务模块将需要存储的数据存储到历史库中;若无法通过存储服务模块存储数据时,则将需要存储的数据存储到本地文件中。在有新增的业务服务模块的情况下通过对应的方式进行数据存储,使数据存储具有通用性,降低了丢失数据的可能性,保证了整个系统的数据完备性。解决了现有技术中存储方法的丢失数据的可能性很大的问题。

    一种分布式数据存储方法和系统

    公开(公告)号:CN108833494A

    公开(公告)日:2018-11-16

    申请号:CN201810509003.6

    申请日:2018-05-24

    IPC分类号: H04L29/08

    摘要: 本发明提供一种分布式数据存储方法和系统,存储方法为:在数据存储区域设置第一数据库和第二数据库,表示数据之间关系的数据存入第一数据库;如数据调用的频率大于设定频率值,则将该数据存入缓存器;如果数据为实时数据,则将该数据存入第二数据库数据库。本发明所提供的技术方案,按照数据的类型对数据进行分布式存储,并将调用频率比较高的数据存储在缓存器中,方便对数据的调用并加快对常用数据的调用速率,解决由于数据数量大,种类多而造成数据调用实时性差的问题。