一种数据查询方法、装置、计算机设备及可读存储介质

    公开(公告)号:CN112069177A

    公开(公告)日:2020-12-11

    申请号:CN202010895876.2

    申请日:2020-08-31

    摘要: 本发明公开了一种数据查询方法、装置、计算机设备及可读存储介质,包括:hive、Presto以及Hbase,利用hive生成宽表,所述Hbase创建第二结果表,宽表数据分批插入第二结果表,生成宽表并将宽表存入hbase,并在hive中设置rowkey,hive对hbase进行整合,离线加载字段并将字段存入业务重点字段和对应rowkey中,创建二级索引得到指定rowkey,借助rowkey可以在hbase中快速得到需要查询的字段值,本发明的hbase可以存入大型宽表,且支持分布式存储,可以设置备份,具有容灾机制,而且创建二级索引之后,通过二级索引查询rowkey,然后根据rowkey查询到需要数据;也可以指定列族和列名查询指定字段值,提高查找速度。

    一种元数据核对各项平台数据质量的方法及系统

    公开(公告)号:CN112307063A

    公开(公告)日:2021-02-02

    申请号:CN202011111719.4

    申请日:2020-10-16

    摘要: 本发明公开了一种元数据核对各项平台数据质量的方法及系统,涉及数据处理技术领域,包括oracle数据库、临时存储单元、元数据管理平台以及比较单元,所述oracle数据库、临时存储单元、元数据管理平台以及比较单元之间电性连接,元数据管理平台用于元数据页面配置数据源或者编写sql,所述oracle数据库用于收集oracle‑sql、hive‑sql、mongo‑sql的各项处理过的数据量,所述临时存储单元用于临时存储hive‑sql和mongo‑sql处理后的数据量,然后计算sql后发送至oracle数据库,所述对比单元用于比较数据库的数据值和各项金额,页面展示后发送给企业微信,本发明可以利用presto作为数据查询引擎,提高了即席查询效率并能将sql解析成对应的mongodb查询语句。

    一种基于dubbo异步调用方法及装置

    公开(公告)号:CN112231112A

    公开(公告)日:2021-01-15

    申请号:CN202010898986.4

    申请日:2020-08-31

    IPC分类号: G06F9/54

    摘要: 本发明实施例提供了一种基于dubbo异步调用方法,包括以下步骤:步骤一:消费端向服务端同时发送多个异步调用请求;步骤二:所述服务端接收来自所述消费端同时发送的多个异步调用请求;步骤三:所述服务端基于接收的多个异步调用请求,所述服务端对多个异步调用请求进行响应;步骤四:所述服务端将响应结果发送至所述消费端。本发明实施例提高了通过dubbo异步调用减少线程开销,不需要创建过多的线程,且dubbo异步调用可以有效减小响应时间。