一种基于数据分片的并行对比数据库表数据的方法

    公开(公告)号:CN117131058A

    公开(公告)日:2023-11-28

    申请号:CN202311369907.0

    申请日:2023-10-23

    Abstract: 本发明公开一种基于数据分片的并行对比数据库表数据的方法,本发明涉及数据对比领域,设置对应的线程池和两端数据库,所述两端数据库用于储存相关的数据信息;通过线程池采集两端数据库中需要对比的数据信息,生成表对任务;分析表对任务是否需要进行分片处理,根据分析结果对其进行分片处理;将分片处理的数据进行拼接整合,组成新的任务对;将所组成的任务对通过线程池进行查询,根据查询结果组成数据对任务;设置数据对比引擎,将数据对任务通过数据对比引擎进行对比分析,输出对比结果;本发明的有益效果为在一定程度上降低了数据量的粒度,提高了并行度和对比效率。

Patent Agency Ranking