-
公开(公告)号:CN105760279B
公开(公告)日:2018-09-07
申请号:CN201610133483.1
申请日:2016-03-09
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网浙江省电力公司 , 北京中电飞华通信股份有限公司 , 国网信息通信产业集团有限公司
Abstract: 本发明公开了一种分布式数据库集群故障预警关联树生成方法及系统,包括:构建M个本地频繁一项集表;构建初始的M个本地关联分支树;将初始的M个本地关联分支树发送至主服务器,并在主服务器中建立初始的主关联树,合并所有重复项;将所有频繁项形成为候选二项集表;将候选二项集表发送到全部M个本地节点,通过剪枝步骤生成频繁二项集表;重复上述步骤,直至不能生成更高维的频繁项集为止,得到最终的预警事件关联树。本发明提出的分布式数据库集群故障预警关联树生成方法及系统,解决了预警关联树建立效率低下的问题。
-
公开(公告)号:CN106250523A
公开(公告)日:2016-12-21
申请号:CN201610634581.3
申请日:2016-08-04
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网北京市电力公司 , 北京中电飞华通信股份有限公司
IPC: G06F17/30
CPC classification number: G06F16/2237 , G06F16/221
Abstract: 本发明公开了一种分布式列存储系统索引的方法,包括:获取每列数据的分布特征,设定每列数据的域值及划分规则;根据域值及划分规则,得到划分后的连续数据区域;分别对应每个数据区域建立一个区域编码向量;进行统计计算,得到每列数据的统计信息,将统计信息与对应的区域编码向量合并,得到带有统计信息的区域编码向量;将带有统计信息的区域编码向量作为位图索引的位向量进行数据的索引。所述分布式列存储系统索引的方法通过设定每列数据的域值和划分规则,使得分组位图索引的划分方式与查询的过滤条件相符合,通过计算列数据的统计信息,不仅提高了分组位图查询的准确性,而且能够保留列存储系统中数据的统计信息,保证数据信息的完整性。
-
公开(公告)号:CN106250523B
公开(公告)日:2019-04-16
申请号:CN201610634581.3
申请日:2016-08-04
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网北京市电力公司 , 北京中电飞华通信股份有限公司
IPC: G06F16/31
Abstract: 本发明公开了一种分布式列存储系统索引的方法,包括:获取每列数据的分布特征,设定每列数据的域值及划分规则;根据域值及划分规则,得到划分后的连续数据区域;分别对应每个数据区域建立一个区域编码向量;进行统计计算,得到每列数据的统计信息,将统计信息与对应的区域编码向量合并,得到带有统计信息的区域编码向量;将带有统计信息的区域编码向量作为位图索引的位向量进行数据的索引。所述分布式列存储系统索引的方法通过设定每列数据的域值和划分规则,使得分组位图索引的划分方式与查询的过滤条件相符合,通过计算列数据的统计信息,不仅提高了分组位图查询的准确性,而且能够保留列存储系统中数据的统计信息,保证数据信息的完整性。
-
公开(公告)号:CN107515899A
公开(公告)日:2017-12-26
申请号:CN201710604810.1
申请日:2017-07-24
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网北京市电力公司 , 北京中电飞华通信股份有限公司 , 国网信息通信产业集团有限公司
IPC: G06F17/30
Abstract: 本发明公开了一种数据库联合分片方法、装置以及存储介质,涉及数据仓库技术领域,其中的方法包括:计算连接条件包含的维表的选择谓词字段参与连接查询操作的维表字段查询频率;计算在维表与事实表进行连接查询操作时,事实表符合包含有选择谓词字段的连接条件的平均记录数;根据维表字段查询频率和平均记录数确定需要分片的维表,将需要分片的维表以及事实表进行联合分片。本发明的方法、装置以及存储介质,实现了根据工作负载特点、以及分片数量限制,自动选择部分维表,进行维表和事实表的联合分片;并且采用排序的方法,减少了算法的计算量,同时保证连接操作的代价最小化。
-
公开(公告)号:CN106817256A
公开(公告)日:2017-06-09
申请号:CN201710016696.0
申请日:2017-01-10
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网浙江省电力公司 , 北京中电飞华通信股份有限公司 , 国网信息通信产业集团有限公司 , 国网冀北电力有限公司
IPC: H04L12/24
CPC classification number: H04L41/06 , H04L41/5096
Abstract: 本发明公开了一种分布式系统网络资源的运维管理可靠性提升方法,包括根据资源的使用情况与深度神经网络的学习经验对接收到的任务进行映射;根据所述深度神经网络的计算代价调整所述映射中任务权重的个数;对所有任务均执行上述操作并更新所述深度神经网络的输出权重。本发明能够在面对难以预测的复杂场景下,能够既不提高计算复杂度,又能够自适应的在问题空间中找到最优解决方案。
-
公开(公告)号:CN105550323A
公开(公告)日:2016-05-04
申请号:CN201510938406.9
申请日:2015-12-15
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网浙江省电力公司 , 国网冀北电力有限公司 , 北京中电飞华通信股份有限公司 , 北京万里开源软件有限公司
Abstract: 本发明公开了一种分布式数据库负载均衡预测方法和预测分析器,采集每个本地数据节点上的负载指标,构成训练集数据;初始化多层循环神经网络模型;从训练集数据中提取一段时间数据作为多层循环神经网络模型的输入,从训练集数据中提取该一段时间数据后同等时间段的数据作为多层循环神经网络模型的输出,训练所述多层循环神经网络模型;从训练集数据中提取该同等时间段的数据之后且相同时间段的数据,作为多层循环神经网络模型的输入,预测该本地数据节点的负载指标。因此,所述分布式数据库负载均衡预测方法和预测分析器能够更为精确地描述负载均衡数据的结构并对其进行有效预测。
-
公开(公告)号:CN108287868B
公开(公告)日:2019-02-26
申请号:CN201711378123.9
申请日:2017-12-19
Applicant: 北京国电通网络技术有限公司 , 国家电网公司
IPC: G06F16/2453
Abstract: 本发明公开了一种数据库查询、数据块划分方法和装置,所述数据库查询方法包括:将用户发送的查询条件与查询单元集合中各查询单元进行比较,根据比较结果生成查询向量;将所述查询向量分别与所述数据库中各数据块所对应的向量进行并操作,根据并操作结果选取向量;根据所述查询条件,在选取的向量所对应的数据块中进行查询,得到查询结果;其中,所述查询单元集合是预先由查询工作负载中分解出的查询单元组合而成的。应用本发明以便于查询时实现更精细化的跳读,提高查询效率,且付出的存储成本较小。
-
公开(公告)号:CN107451229A
公开(公告)日:2017-12-08
申请号:CN201710605395.1
申请日:2017-07-24
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网北京市电力公司 , 北京中电飞华通信股份有限公司 , 国网信息通信产业集团有限公司
IPC: G06F17/30
Abstract: 本发明公开了一种数据库查询方法和装置,包括步骤:根据数据中的实体信息构建实体簇,并将实体簇与存储节点建立映射关系,根据所述映射关系将数据存储至存储节点;根据查询指令,将属于同一实体簇但位于不同存储节点上数据读取到一个存储节点的内存中;根据实体簇中的实体信息将维度数据在存储节点之间进行迁移;执行查询指令。实现了优化的数据库构建和数据库查询方法,提高数据库查询性能。
-
公开(公告)号:CN106777027A
公开(公告)日:2017-05-31
申请号:CN201611123673.1
申请日:2016-12-08
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网北京市电力公司 , 北京中电飞华通信股份有限公司 , 国网信息通信产业集团有限公司
Abstract: 本发明公开了一种大规模并行处理行列混合数据存储装置及存储、查询方法,属于数据库技术领域。本发明装置包含联机事务处理模块、联机分析处理模块、存储模块、跨层查询模块以及跨层交互模块。本发明在一个数据库中同时实现了OLTP和OLAP两种功能,可以根据数据的访问频率将数据以适当的形式存储,既能为用户提供方便的查询服务,又可以为用户提供高效地数据分析服务,相对于现有技术中OLTP和OLAP分别部署的方式来说是一种重要的技术进步。
-
公开(公告)号:CN105760279A
公开(公告)日:2016-07-13
申请号:CN201610133483.1
申请日:2016-03-09
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网浙江省电力公司 , 北京中电飞华通信股份有限公司
CPC classification number: G06F11/3006 , G06F11/3072 , G06F16/2246 , G06F16/27
Abstract: 本发明公开了一种分布式数据库集群故障预警关联树生成方法及系统,包括:构建M个本地频繁一项集表;构建初始的M个本地关联分支树;将初始的M个本地关联分支树发送至主服务器,并在主服务器中建立初始的主关联树,合并所有重复项;将所有频繁项形成为候选二项集表;将候选二项集表发送到全部M个本地节点,通过剪枝步骤生成频繁二项集表;重复上述步骤,直至不能生成更高维的频繁项集为止,得到最终的预警事件关联树。本发明提出的分布式数据库集群故障预警关联树生成方法及系统,解决了预警关联树建立效率低下的问题。
-
-
-
-
-
-
-
-
-