发明公开
- 专利标题: 一种容器化分布式数据采集处理方法、装置、设备及介质
-
申请号: CN202211699476.X申请日: 2022-12-28
-
公开(公告)号: CN116193296A公开(公告)日: 2023-05-30
- 发明人: 张育辉 , 张伟
- 申请人: 南方电网数字电网研究院有限公司
- 申请人地址: 广东省广州市黄埔区中新广州知识城亿创街1号406房之86
- 专利权人: 南方电网数字电网研究院有限公司
- 当前专利权人: 南方电网数字电网研究院有限公司
- 当前专利权人地址: 广东省广州市黄埔区中新广州知识城亿创街1号406房之86
- 代理机构: 北京品源专利代理有限公司
- 代理商 蔡舒野
- 主分类号: H04Q9/00
- IPC分类号: H04Q9/00 ; H04L67/565 ; H04L67/1097
摘要:
本发明公开了一种容器化分布式数据采集处理方法、装置、设备及介质。该方法包括至少一个分布式容器,该分布式容器用于执行如下步骤:接收海量终端设备采集的待处理数据;对所述待处理数据进行解析处理,得到目标格式的待存储数据;对所述待存储数据按照预先设置的规则进行转换处理,得到待使用数据;对所述待使用数据合并处理,得到目标存储数据。本发明实施例的技术方案,通过在计算机集群上部署容器化分布式节点,可基于各分布式节点对海量终端设备上传的待处理数据进行解析、转换以及合并处理,实现了对不同终端类型上传的海量数据进行实时地处理,扩大数据处理容量的同时提高了数据处理效率。