-
公开(公告)号:CN103678520A
公开(公告)日:2014-03-26
申请号:CN201310618681.3
申请日:2013-11-29
Applicant: 中国科学院计算技术研究所 , 国网浙江省电力公司信息通信分公司
CPC classification number: G06F17/30336
Abstract: 本发明提供了一种基于云计算的多维区间查询方法,该方法包括:索引创建步骤和多维区间数据查询步骤;索引创建步骤为通过外部输入的索引创建命令,自动创建并保存分布式网格文件索引和元数据;多维区间数据查询步骤为通过外部输入的查询命令,基于分布式网格文件索引和元数据,定位需要读取的数据块,并将读取请求自动均匀分布到服务器集群的各个节点后,在系统中并行处理查询请求,并行获取所有查询结果,经汇总后返回给用户。本发明还提供了一种基于分布式网格文件索引的多维区间查询系统。
-
公开(公告)号:CN104408134A
公开(公告)日:2015-03-11
申请号:CN201410708225.2
申请日:2014-11-28
Applicant: 中国科学院计算技术研究所 , 国网浙江省电力公司信息通信分公司
CPC classification number: G06F17/30448
Abstract: 本发明提供了一种SQL到云环境的映射方法,包括下列步骤:1)重写待转换SQL语句,获得具有原待转换SQL语句相同功能的多个重写HiveQL语句;2)计算各个HiveQL语句的执行代价,选出最优语句进行输出。本发明还提供了相应的SQL到云环境的映射系统。本发明能够在SQL语句映射到云环境的同时,对云环境语句(例如HiveQL语句)进行快速地优化,进而降低Mapper和Reducer实际输入数据量,提升查询性能。
-
公开(公告)号:CN103678519A
公开(公告)日:2014-03-26
申请号:CN201310618652.7
申请日:2013-11-29
Applicant: 中国科学院计算技术研究所 , 国网浙江省电力公司信息通信分公司
IPC: G06F17/30
CPC classification number: G06F17/30339
Abstract: 本发明公开了一种支持Hive DML(Data Manipulation Language)增强的混合存储系统及其方法,该存储系统基于DualTable表建立,包括:DualTable表创建模块和DualTable表执行模块;DualTable表创建模块用于建立包含主表和附表,为每行数据维护了唯一ID并基于代价模型对外提供特定操作集的DualTable表;DualTable表执行模块用于基于DualTable的主表和附表实现对DualTable表中的数据进行读取和查询,基于DualTable的附表实现对DualTable表中的数据进行更改,基于代价模型实现DualTable表提供的操作集,基于有序的每行数据唯一ID实现主表和附表数据读取时的合并。
-
公开(公告)号:CN103618772B
公开(公告)日:2018-12-11
申请号:CN201310584102.8
申请日:2013-11-20
Applicant: 国家电网公司 , 国网浙江省电力公司信息通信分公司 , 浙江华云信息科技有限公司
IPC: H04L29/08 , H04L12/803
Abstract: 基于主机压力的负载均衡分发方法,涉及一种负载均衡分发方法。传统的负载均衡技术大在服务器的负载分配上容易发生某几台过载的情况。本发明包括以下步骤:根据各网关服务器的硬件配置情况设定权重;负载均衡器维护网关服务器列表及各网关服务器的权重信息;负载均衡器决定分发路径,并更新当前各网关服务器的链路数量;负载均衡器向网关服务器每分配一条连接,将其当前链路数量计量器加1;当一网关服务器的服务发生异常时,负载均衡器将原异常网关服务器的链路分配至网关服务器上;当网关服务器的负载超过预设的阀值,不再将新的连接分配到该网关服务器上。本技术方案能有效避免某几台网关服务器过载而产生系统性能瓶颈的情况发生。
-
公开(公告)号:CN103618772A
公开(公告)日:2014-03-05
申请号:CN201310584102.8
申请日:2013-11-20
Applicant: 国家电网公司 , 国网浙江省电力公司信息通信分公司 , 浙江创维自动化工程有限公司
IPC: H04L29/08 , H04L12/803
Abstract: 基于主机压力的负载均衡分发方法,涉及一种负载均衡分发方法。传统的负载均衡技术大在服务器的负载分配上容易发生某几台过载的情况。本发明包括以下步骤:根据各网关服务器的硬件配置情况设定权重;负载均衡器维护网关服务器列表及各网关服务器的权重信息;负载均衡器决定分发路径,并更新当前各网关服务器的链路数量;负载均衡器向网关服务器每分配一条连接,将其当前链路数量计量器加1;当一网关服务器的服务发生异常时,负载均衡器将原异常网关服务器的链路分配至网关服务器上;当网关服务器的负载超过预设的阀值,不再将新的连接分配到该网关服务器上。本技术方案能有效避免某几台网关服务器过载而产生系统性能瓶颈的情况发生。
-
公开(公告)号:CN103678520B
公开(公告)日:2017-03-29
申请号:CN201310618681.3
申请日:2013-11-29
Applicant: 中国科学院计算技术研究所
Abstract: 本发明提供了一种基于云计算的多维区间查询方法,该方法包括:索引创建步骤和多维区间数据查询步骤;索引创建步骤为通过外部输入的索引创建命令,自动创建并保存分布式网格文件索引和元数据;多维区间数据查询步骤为通过外部输入的查询命令,基于分布式网格文件索引和元数据,定位需要读取的数据块,并将读取请求自动均匀分布到服务器集群的各个节点后,在系统中并行处理查询请求,并行获取所有查询结果,经汇总后返回给用户。本发明还提供了一种基于分布式网格文件索引的多维区间查询系统。
-
公开(公告)号:CN103678519B
公开(公告)日:2017-03-29
申请号:CN201310618652.7
申请日:2013-11-29
Applicant: 中国科学院计算技术研究所
IPC: G06F17/30
Abstract: 本发明公开了一种支持Hive DML(Data Manipulation Language)增强的混合存储系统及其方法,该存储系统基于DualTable表建立,包括:DualTable表创建模块和DualTable表执行模块;DualTable表创建模块用于建立包含主表和附表,为每行数据维护了唯一ID并基于代价模型对外提供特定操作集的DualTable表;DualTable表执行模块用于基于DualTable的主表和附表实现对DualTable表中的数据进行读取和查询,基于DualTable的附表实现对DualTable表中的数据进行更改,基于代价模型实现DualTable表提供的操作集,基于有序的每行数据唯一ID实现主表和附表数据读取时的合并。
-
-
-
-
-
-