-
公开(公告)号:CN112069177A
公开(公告)日:2020-12-11
申请号:CN202010895876.2
申请日:2020-08-31
申请人: 银盛支付服务股份有限公司
IPC分类号: G06F16/22 , G06F16/2455 , G06F16/2458
摘要: 本发明公开了一种数据查询方法、装置、计算机设备及可读存储介质,包括:hive、Presto以及Hbase,利用hive生成宽表,所述Hbase创建第二结果表,宽表数据分批插入第二结果表,生成宽表并将宽表存入hbase,并在hive中设置rowkey,hive对hbase进行整合,离线加载字段并将字段存入业务重点字段和对应rowkey中,创建二级索引得到指定rowkey,借助rowkey可以在hbase中快速得到需要查询的字段值,本发明的hbase可以存入大型宽表,且支持分布式存储,可以设置备份,具有容灾机制,而且创建二级索引之后,通过二级索引查询rowkey,然后根据rowkey查询到需要数据;也可以指定列族和列名查询指定字段值,提高查找速度。
-
公开(公告)号:CN112307063A
公开(公告)日:2021-02-02
申请号:CN202011111719.4
申请日:2020-10-16
申请人: 银盛支付服务股份有限公司
IPC分类号: G06F16/2455 , G06F16/2453 , G06F16/242 , G06F16/248 , G06F16/28 , H04L12/58 , H04L29/08
摘要: 本发明公开了一种元数据核对各项平台数据质量的方法及系统,涉及数据处理技术领域,包括oracle数据库、临时存储单元、元数据管理平台以及比较单元,所述oracle数据库、临时存储单元、元数据管理平台以及比较单元之间电性连接,元数据管理平台用于元数据页面配置数据源或者编写sql,所述oracle数据库用于收集oracle‑sql、hive‑sql、mongo‑sql的各项处理过的数据量,所述临时存储单元用于临时存储hive‑sql和mongo‑sql处理后的数据量,然后计算sql后发送至oracle数据库,所述对比单元用于比较数据库的数据值和各项金额,页面展示后发送给企业微信,本发明可以利用presto作为数据查询引擎,提高了即席查询效率并能将sql解析成对应的mongodb查询语句。
-
公开(公告)号:CN112231112A
公开(公告)日:2021-01-15
申请号:CN202010898986.4
申请日:2020-08-31
申请人: 银盛支付服务股份有限公司
IPC分类号: G06F9/54
摘要: 本发明实施例提供了一种基于dubbo异步调用方法,包括以下步骤:步骤一:消费端向服务端同时发送多个异步调用请求;步骤二:所述服务端接收来自所述消费端同时发送的多个异步调用请求;步骤三:所述服务端基于接收的多个异步调用请求,所述服务端对多个异步调用请求进行响应;步骤四:所述服务端将响应结果发送至所述消费端。本发明实施例提高了通过dubbo异步调用减少线程开销,不需要创建过多的线程,且dubbo异步调用可以有效减小响应时间。
-
-