一种数据存储和查询方法以及装置

    公开(公告)号:CN103914462B

    公开(公告)日:2017-09-05

    申请号:CN201210592932.0

    申请日:2012-12-31

    Abstract: 本申请公开了一种数据存储和查询方法以及装置。该方法包括:确定单位批量待存储数据的每个列所需的数据块个数、大小和取值范围并为每个列初始化存储空间;按照单位批量待存储数据的各行数据的同一列的取值所属的范围、以及同一取值范围内各行数据的同一列的取值之间的排序关系,确定该列的存储空间中分别用于存储所述各行数据的该列的取值的数据块的ID和数据块内的位置,在相应数据块的相应位置处存储所述各行数据的该列的取值,使得同一个数据块内的各行取值有序排列、且各个数据块存储的取值之间也有序排列;存储同一行数据中各个列之间的存储位置引用关系信息。应用本发明能够提高大批量用户并发执行查询操作时的并发操作吞吐率。

    一种告警上报方法、告警上报节点及告警上报系统

    公开(公告)号:CN104753712A

    公开(公告)日:2015-07-01

    申请号:CN201310752991.4

    申请日:2013-12-31

    Abstract: 本发明发明涉及通信技术领域,尤其涉及一种告警上报方法、告警上报节点及告警上报系统。本发明的内容包括:告警上报节点将采集到的告警信息发送给同一分组内的主告警上报节点,以使所述主告警上报节点上报所述告警信息;所述告警上报节点在预设时间段内没有接收到所述主告警上报节点发送的响应消息,将所述告警信息发送给同一分组内的从告警上报节点,以使所述从告警上报节点上报所述告警信息。本发明实施例在主告警上报节点故障时,通过同一分组内的从告警上报节点上报告警信息,可保证告警信息的可靠上报。

    一种告警上报方法、告警上报节点及告警上报系统

    公开(公告)号:CN104753712B

    公开(公告)日:2018-01-30

    申请号:CN201310752991.4

    申请日:2013-12-31

    Abstract: 本发明涉及通信技术领域,尤其涉及一种告警上报方法、告警上报节点及告警上报系统。本发明的内容包括:告警上报节点将采集到的告警信息发送给同一分组内的主告警上报节点,以使所述主告警上报节点上报所述告警信息;所述告警上报节点在预设时间段内没有接收到所述主告警上报节点发送的响应消息,将所述告警信息发送给同一分组内的从告警上报节点,以使所述从告警上报节点上报所述告警信息。本发明实施例在主告警上报节点故障时,通过同一分组内的从告警上报节点上报告警信息,可保证告警信息的可靠上报。

    一种分布式集群配置管理方法及装置

    公开(公告)号:CN104753706A

    公开(公告)日:2015-07-01

    申请号:CN201310741729.X

    申请日:2013-12-27

    Abstract: 本发明提供一种分布式集群配置管理方法及装置,即一种通用的分布式集群配置管理装置及应用于该装置的配置管理方法,无论是来自执行节点还是外部业务服务器的请求,均可以通过统一接口,即REST请求转发模块分发到相应的处理模块,即执行节点数据处理模块和API数据处理模块,进而由处理模块将状态管理的相应指令发送给状态管理模块,由其在数据库中对执行节点或者服务的状态进行读取、修改等操作,以此实现对所有服务以及执行节点的状态管理,节约系统资源。

    一种分布式集群配置管理方法及装置

    公开(公告)号:CN104753706B

    公开(公告)日:2017-11-24

    申请号:CN201310741729.X

    申请日:2013-12-27

    Abstract: 本发明提供一种分布式集群配置管理方法及装置,即一种通用的分布式集群配置管理装置及应用于该装置的配置管理方法,无论是来自执行节点还是外部业务服务器的请求,均可以通过统一接口,即REST请求转发模块分发到相应的处理模块,即执行节点数据处理模块和API数据处理模块,进而由处理模块将状态管理的相应指令发送给状态管理模块,由其在数据库中对执行节点或者服务的状态进行读取、修改等操作,以此实现对所有服务以及执行节点的状态管理,节约系统资源。

    一种数据加载方法和系统

    公开(公告)号:CN103902585A

    公开(公告)日:2014-07-02

    申请号:CN201210580016.5

    申请日:2012-12-27

    Inventor: 秦平 齐骥 钱岭

    CPC classification number: G06F16/283 H04L67/2852

    Abstract: 本申请公开了一种数据加载方法和系统。该方法包括:配置数据块标识ID与收集点的映射关系,在收集点出现故障时,将该出现故障的收集点映射的数据块ID重新配置为与其他未出现故障的收集点相映射;将需要加载的数据按照预设规则划分为数据块,并为每个数据块赋予ID,获取数据块ID与收集点的映射关系,根据该映射关系,将数据块发给该数据块ID映射的收集点;收集点将数据块写入到数据仓库。应用本发明能够解决由于收集节点出现故障而导致部分数据无法加载到数据仓库的问题。

    数据备份方法及装置、数据恢复方法及装置

    公开(公告)号:CN104714858A

    公开(公告)日:2015-06-17

    申请号:CN201310685278.2

    申请日:2013-12-13

    Inventor: 秦平

    Abstract: 本发明涉及数据备份技术领域,尤其涉及数据备份方法及装置、数据恢复方法及装置,用以解决现有技术中利用Hbase的Export工具、Import工具进行数据备份及恢复的方法需要的备份及恢复窗口较长的问题,本发明实施例提供的数据备份方法,包括:备份节点根据控制节点的指示,通过Hbase,为备份对象创建快照;所述备份节点将创建的所述快照中的数据通过分布式文件系统HDFS备份到远端存储节点中。本发明实施例提供的数据恢复方法,包括:恢复节点根据控制节点的指示,读取远端存储节点存储的数据;所述恢复节点将读取的数据整理成快照格式的数据,并将整理后的数据通过HDFS接口写入用于提供数据访问服务的数据恢复系统。

    一种数据存储和查询方法以及装置

    公开(公告)号:CN103914462A

    公开(公告)日:2014-07-09

    申请号:CN201210592932.0

    申请日:2012-12-31

    CPC classification number: G06F17/30312

    Abstract: 本申请公开了一种数据存储和查询方法以及装置。该方法包括:确定单位批量待存储数据的每个列所需的数据块个数、大小和取值范围并为每个列初始化存储空间;按照单位批量待存储数据的各行数据的同一列的取值所属的范围、以及同一取值范围内各行数据的同一列的取值之间的排序关系,确定该列的存储空间中分别用于存储所述各行数据的该列的取值的数据块的ID和数据块内的位置,在相应数据块的相应位置处存储所述各行数据的该列的取值,使得同一个数据块内的各行取值有序排列、且各个数据块存储的取值之间也有序排列;存储同一行数据中各个列之间的存储位置引用关系信息。应用本发明能够提高大批量用户并发执行查询操作时的并发操作吞吐率。

Patent Agency Ranking