一种分布式两级缓存的方法和系统

    公开(公告)号:CN112328632B

    公开(公告)日:2022-06-14

    申请号:CN202011070559.3

    申请日:2020-10-09

    摘要: 本发明涉及数据读取技术领域,特别涉及一种分布式两级缓存的方法和系统。所述一种分布式两级缓存的方法,包括步骤:响应用户请求,所述第一业务服务器发送获取命名空间缓存请求至缓存服务器;若缓存服务器中不存在命名空间缓存,则从数据库中获取数据,并将数据同步存储于第一本地内存缓存和集中式缓存;若缓存服务器中存在命名空间缓存,则从第一本地内存缓存中获取数据,若从第一本地内存缓存中无法获取数据,则从集中式缓存中获取数据,并同步存储数据至第一本地内存缓存。通过上述方法可大大提高了数据读取速度,同时可以为多个节点提供服务,也大大缓解了数据库的压力。

    数据迁移校正方法及系统

    公开(公告)号:CN107037978B

    公开(公告)日:2019-11-05

    申请号:CN201610930983.8

    申请日:2016-10-31

    IPC分类号: G06F3/06

    摘要: 本申请涉及数据迁移,特别涉及大型数据和特大型数据迁移和校正方法。本申请提供一种数据迁移校正的方法和系统,其中方法应用于具有控制器的系统中,控制器连接源数据服务器、目标数据服务器,包括步骤:源数据服务器存储有迁出文件,目标数据服务器具有未使用的存储空间,用于存放迁出文件,按源数据服务器的处理器核的个数的整数倍,将迁出文件划分为多个数据块,源数据服务器计算,获得每个数据块分别对应的数字摘要A;将数据摘要A保存于控制器中;并将迁出文件发送至目标数据服务器;在目标数据服务器中,在迁出文件转移的过程中平行计算经过数据迁移后的迁出文件中的数据块的数据摘要B;比较数据摘要A和数据摘要B是否相同;本申请用于解决大数据迁移时完整性校验的问题,其可靠性高、速度快。