-
公开(公告)号:CN116089508A
公开(公告)日:2023-05-09
申请号:CN202211515682.0
申请日:2022-11-30
申请人: 贵州多彩宝互联网服务有限公司
摘要: 本发明涉及数据采集、数据仓库、归并排序方法,特别涉及一种基于数据采集与对账的系统,包括:数据采集接口模块,用于接收用户通过人机交互界面制定的配置采集规则;核对模块,用于根据所述配置采集规则对本系统数据和目标系统数据进行核对,所述本系统和所述目标系统为异构数据仓库。本发明还公开了一种基于数据采集与对账系统的方法。本发明在数据仓库中,通过数据管道对各个业务线的业务数据进行ETL抽取,并全部存储到对账系统集群,可以通过计算对数据进行加工处理。在对账系统集群中,通过通用化的设计,简洁的配置,高效率的比对,使得对账环节能够解决大多数业务线的通用的数据对账问题。
-
公开(公告)号:CN115757459A
公开(公告)日:2023-03-07
申请号:CN202211286929.6
申请日:2022-10-20
申请人: 贵州多彩宝互联网服务有限公司
发明人: 章莉
IPC分类号: G06F16/242 , G06F16/22 , G06F16/21
摘要: 本发明涉及一种基于MySQL数据库操作审计、回滚的方法,包括以下步骤:S1建立用于进行语法解析的MySQL语法知识库;S2建立用于保证MySQL语法知识库及时更新的数据连接,获取数据库授权;获取当前操作SQL脚本,进行初步分析,通过S1分析当前SQL的写作是否满足合规性;S4,当S3为pass,将要执行的SQL到写到待执行队列,并记录执行时间;S5扫描待执行队列,接收步骤S4新的写入请求,建立新的执行任务;S6系统扫描事件任务,先将执行当前影响数据保存到回滚区,再执行指定SQL脚本;S7任务执行后,连接数据库binlog日志,获取执行本次SQL对应的日志,并将执行任务移除待执行队列;S8执行结果有异常,即执行回滚模式,找到对应的回滚数据,构造回滚SQL,执行恢复数据到原状。
-