一种洗牌数据处理方法、装置、设备及存储介质
摘要:
本发明公开了一种洗牌数据处理方法、装置、设备及存储介质,该方法包括:映射器将洗牌数据推送至指定工作节点;所述指定工作节点将所述洗牌数据进行合并处理,合并处理完成后将所述洗牌数据复制到与其他工作节点中;每经过预设时间间隔,所述指定工作节点则将合并处理的所述洗牌数据刷新到磁盘中,供需要时读取。本发明中指定的工作节点在接收到映射器推送的洗牌数据后,先对洗牌数据进行合并处理,然后将洗牌数据同步到其他工作节点中,并定时将洗牌数据刷新到磁盘中,从而实现数据的存储备份,提高了数据的可靠性,一定程度上有效避免了因故障存储导致需重新计算该存储中全部洗牌数据的问题,降低了洗牌数据的处理成本。
0/0