- 专利标题: 数据处理方法、数据容错方法和装置及存储介质
-
申请号: CN202311357456.9申请日: 2023-10-19
-
公开(公告)号: CN117112312B公开(公告)日: 2024-02-09
- 发明人: 齐赫 , 段蒙 , 叶先进 , 李志方 , 罗韩梅
- 申请人: 腾讯科技(深圳)有限公司
- 申请人地址: 广东省深圳市南山区高新区科技中一路腾讯大厦35层
- 专利权人: 腾讯科技(深圳)有限公司
- 当前专利权人: 腾讯科技(深圳)有限公司
- 当前专利权人地址: 广东省深圳市南山区高新区科技中一路腾讯大厦35层
- 代理机构: 北京康信知识产权代理有限责任公司
- 代理商 周婷婷
- 主分类号: G06F11/14
- IPC分类号: G06F11/14 ; G06F16/172 ; G06F16/182
摘要:
本发明公开了一种数据处理方法、数据容错方法和装置及存储介质。其中,该方法包括:通过数据处理节点向数据分发节点发送第一数据获取请求,第一数据获取请求用于获取经过目标数据预处理得到的目标中间数据集;在数据分发节点处于异常运行状态的情况下,获取数据分发节点预先发送的容错日志;根据容错日志确定目标中间数据集中包括的第一数据子集已经过容错处理的情况下,通过数据处理节点向目标存储节点发送第二数据获取请求,第二数据获取请求用于获取第一数据子集;通过数据处理节点根据第一数据子集进行数据处理,得到目标处理结果。本发明解决了现有的数据处理方法操作效率较低的技术问题。
公开/授权文献
- CN117112312A 数据处理方法、数据容错方法和装置及存储介质 公开/授权日:2023-11-24