- 专利标题: 基于批流一体的数据处理方法、装置、计算机设备和介质
-
申请号: CN202111318823.5申请日: 2021-11-09
-
公开(公告)号: CN113779094B公开(公告)日: 2022-03-22
- 发明人: 王博一 , 王晓 , 霍星志 , 郭宇鹏 , 毛少将
- 申请人: 通号通信信息集团有限公司
- 申请人地址: 北京市丰台区汽车博物馆南路1号院中国通号大厦A座601室
- 专利权人: 通号通信信息集团有限公司
- 当前专利权人: 通号通信信息集团有限公司
- 当前专利权人地址: 北京市丰台区汽车博物馆南路1号院中国通号大厦A座601室
- 代理机构: 北京天昊联合知识产权代理有限公司
- 代理商 彭瑞欣; 姜春咸
- 主分类号: G06F16/2455
- IPC分类号: G06F16/2455 ; G06F16/25 ; G06F16/28
摘要:
本公开提供一种基于批流一体的数据处理方法,所述方法应用于数据处理装置,数据处理装置包括数据应用层和多个处理层,各处理层形成处理链路,所述方法包括:获取待处理数据;根据处理链路逐层处理待处理数据,得到第一数据;其中,在各处理层中,对输入本处理层的数据进行处理,将处理后的数据输入至下一个处理层;在数据应用层中处理第一数据,得到第二数据;响应于检测出第二数据发生数据错误,在发生数据错误的处理层中,根据本处理层的离线数据对发生数据错误的数据进行修正,将修正后的数据输入至下一个处理层,以便下一个处理层对输入的数据进行处理。本公开还提供一种数据处理装置、计算机设备和介质。
公开/授权文献
- CN113779094A 基于批流一体的数据处理方法、装置、计算机设备和介质 公开/授权日:2021-12-10