对列状表数据库的数据库操作

    公开(公告)号:CN104424314B

    公开(公告)日:2019-06-11

    申请号:CN201310403089.1

    申请日:2013-09-06

    申请人: SAP欧洲公司

    IPC分类号: G06F16/22 G06F16/215

    CPC分类号: G06F16/221

    摘要: 计算机系统包括至少一个处理器和可操作地耦合到所述至少一个处理器的至少一个存储器。存储器包括存储池和被分区成多个片段的数据库。多个片段中的每一个被分配来自存储池的存储块,而且片段以列状表格式存储压缩数据。数据库操作以压缩格式被应用于多个片段中的至少一个片段中的压缩数据。

    基于数据老化优化数据访问

    公开(公告)号:CN108205582A

    公开(公告)日:2018-06-26

    申请号:CN201711346680.2

    申请日:2017-12-15

    申请人: SAP欧洲公司

    IPC分类号: G06F17/30

    摘要: 一种数据库,包括具有相应分区日期的多个分区。从数据库的视图接收对数据的查询,该查询包含用于检索数据的过滤参数。分析视图的定义以确定有助于视图的数据库的表格以及与该表格关联的老化对象。例如,基于视图的定义中的注释来识别与老化对象相关联的限制规则。基于限制规则确定老化对象的限制日期。基于分区的分区日期等于或晚于限制日期选择来自所述多个分区的分区。根据过滤参数从选择的分区中检索查询的数据,并基于检索的数据生成对查询的响应。

    一种数据存储的方法及装置

    公开(公告)号:CN107463695A

    公开(公告)日:2017-12-12

    申请号:CN201710692820.5

    申请日:2017-08-14

    发明人: 解一豪

    IPC分类号: G06F17/30

    摘要: 本发明提供了一种数据存储的方法及装置,该方法,包括:预先设置对象表和属性表,其中,所述对象表用于保存对象的对象标识,所述属性表用于保存所述对象的至少一个属性与至少一个属性标识的对应关系,其中,每个所述属性标识中包括:所述对象的对象标识;确定待存储对象和所述待存储对象的至少一个属性;确定所述待存储对象的对象标识;将所述待存储对象的对象标识保存到所述对象表中;根据所述待存储对象的对象标识,确定所述待存储对象的至少一个属性的属性标识;将所述待存储对象的至少一个属性与所述待存储对象的至少一个属性的属性标识的对应关系保存到所述属性表中。本发明提供了一种数据存储的方法及装置,能够更加方便维护。

    基于HBase的告警数据存储方法及装置

    公开(公告)号:CN107273482A

    公开(公告)日:2017-10-20

    申请号:CN201710438847.1

    申请日:2017-06-12

    发明人: 浦超

    IPC分类号: G06F17/30

    摘要: 本发明实施例提供一种基于HBase的告警数据存储方法及装置,其中,方法包括:获取告警数据和该告警数据中告警字段在预设时间段内的使用频率;根据该使用频率将告警数据中所有告警字段划分为热字段和冷字段,分别归属到预先创建的HBase告警数据表中的不同列族;根据告警发生时间对告警数据中每条告警记录进行散列处理,并根据处理结果,按照预设行主键格式生成每一条告警记录在HBase告警数据表中的行主键,以使不同时刻的告警记录均匀分散到HBase告警数据表的各个Region上,同时向预先创建的辅助索引表写入索引数据。本发明实施例可实现对告警数据进行存储,使后续能查询到最新的告警数据,满足告警数据存取需求。

    对应库内的排序
    5.
    发明公开

    公开(公告)号:CN106528890A

    公开(公告)日:2017-03-22

    申请号:CN201611208600.2

    申请日:2016-12-23

    申请人: 陈勇

    发明人: 陈勇

    IPC分类号: G06F17/30

    CPC分类号: G06F16/221

    摘要: 本发明涉及软件领域,特别是涉及对应库内的排序,规定了对应库内对应的排序方式,避免杂乱无章。

    一种基于solr的Hbase秒级查询方案

    公开(公告)号:CN106326429A

    公开(公告)日:2017-01-11

    申请号:CN201610723701.7

    申请日:2016-08-25

    发明人: 童浩 杨凡

    IPC分类号: G06F17/30

    摘要: 本发明公开了一种基于solr的Hbase秒级查询方案,包括以下步骤:将原始数据插入Hbase列式数据库中;调用MapReduce增量更新solr中索引,先获取原始数据并以solr特有的文档格式存入solr的服务器中;访问solr服务端,建索引;先查索引,从索引中获取rowkey,再去Hbase主表查询需要的结果数据。本发明搜索速度快,准确率高,通过solr和hbase相结合的技术,实现对海量数据的秒级检索,solr自带的分页功能可以每次返回一页数据的rowkey,由于每页数据的数量极其有限,所以再基于该页的rowkey去Hbase查询时响应速度非常快,可控制在毫秒级。

    一种水文监测数据存储的方法及系统

    公开(公告)号:CN108319725A

    公开(公告)日:2018-07-24

    申请号:CN201810168421.3

    申请日:2018-02-28

    发明人: 陈华

    IPC分类号: G06F17/30

    摘要: 本发明公开一种水文监测数据存储的方法及系统。该方法包括:获取水文监测数据;对所述水文监测数据进行分类,得到高频无限生长数据和低频有限数据;将所述高频无限生长数据通过基于无限水文数据大表的分布式存储模型进行存储;构建所述无限水文数据大表的主索引,用于通过所述主索引对所述高频无限生长数据进行管理;将所述低频有限数据通过基于关系型数据库的存储模型进行存储。采用本发明的方法及系统,对存储数据占用的资源在不同节点和分布式域处均衡分配负载,极大提高水文监测无限海量数据存储和查询效率,满足水文监测数据无限增长的需求。