-
公开(公告)号:CN107908672B
公开(公告)日:2022-01-14
申请号:CN201711012672.4
申请日:2017-10-24
申请人: 深圳前海微众银行股份有限公司
IPC分类号: G06F16/28 , G06F16/27 , G06F16/22 , G06F16/215
摘要: 本发明公开了一种基于Hadoop平台的应用报表实现方法,包括:将HDFS中存储的源数据进行抽取转换处理后加载到数据仓库的贴源层数据表中,并从中抽取数据进行数据质量校验,若校验通过,则对抽取数据进行转换处理后加载到数据仓库的模型层数据表中,然后再从中抽取数据进行数据质量校验,若校验通过,则对抽取数据进行转换处理后加载到数据仓库的应用层数据表中;对应用层数据表中数据进行数据质量校验,若校验通过,则将应用层数据表作为待上报的应用报表,否则发出校验异常告警。本发明还公开了一种基于Hadoop平台的应用报表实现设备及计算机可读存储介质。本发明可在低成本硬件资源下,实现海量数据报送,并满足高数据质量报送要求。
-
公开(公告)号:CN111694803A
公开(公告)日:2020-09-22
申请号:CN202010545150.6
申请日:2020-06-15
申请人: 深圳前海微众银行股份有限公司
IPC分类号: G06F16/178 , G06F16/27 , G06F16/2458 , G06F16/28
摘要: 本发明涉及金融科技(Fintech)技术领域,并公开了一种数据查询方法,该方法包括:将数据仓库中的目标数据转换为目标文件,并将所述目标文件导入至多个目标集群;若获取到数据查询指令,则基于所述数据查询指令同时对各所述目标集群进行数据查询,以获取查询结果,并在所述查询结果存在多个时,检测各所述查询结果中是否存在查询时长大于或等于预设时长的超时查询结果;若不存在,则对各所述查询结果进行合并处理,以获取目标查询结果,并输出所述目标查询结果。本发明还公开了一种数据查询装置、设备和一种计算机存储介质。本发明提高了数据查询的效率。
-
公开(公告)号:CN114385685A
公开(公告)日:2022-04-22
申请号:CN202111671999.9
申请日:2021-12-31
申请人: 深圳前海微众银行股份有限公司
发明人: 冼炳洪
IPC分类号: G06F16/2455 , G06Q40/02
摘要: 本申请实施例公开了一种数据报送方法及装置、存储介质,包括:获取信贷业务对应的信贷源数据;并对信贷源数据进行分组,得到分组数据;在征信报送时间达到时,从分组数据中获取目标分组数据;从目标分组数据中,确定报送数据;根据报送数据,生成征信报文;并向征信设备上报征信报文。
-
公开(公告)号:CN107908672A
公开(公告)日:2018-04-13
申请号:CN201711012672.4
申请日:2017-10-24
申请人: 深圳前海微众银行股份有限公司
IPC分类号: G06F17/30
CPC分类号: G06F17/30575 , G06F17/30194 , G06F17/30303 , G06F17/30339 , G06F17/30592
摘要: 本发明公开了一种基于Hadoop平台的应用报表实现方法,包括:将HDFS中存储的源数据进行抽取转换处理后加载到数据仓库的贴源层数据表中,并从中抽取数据进行数据质量校验,若校验通过,则对抽取数据进行转换处理后加载到数据仓库的模型层数据表中,然后再从中抽取数据进行数据质量校验,若校验通过,则对抽取数据进行转换处理后加载到数据仓库的应用层数据表中;对应用层数据表中数据进行数据质量校验,若校验通过,则将应用层数据表作为待上报的应用报表,否则发出校验异常告警。本发明还公开了一种基于Hadoop平台的应用报表实现设备及计算机可读存储介质。本发明可在低成本硬件资源下,实现海量数据报送,并满足高数据质量报送要求。
-
-
-