基于大数据平台的数据处理系统及链路优化方法
摘要:
本发明涉及一种基于大数据平台的数据处理系统及链路优化方法。所述系统,包括:数据接入模块,采集各个类别的电力数据,电力数据的类别包括:非实时结构化数据、采集量测数据和外部数据;数据存储模块,分别根据预设数据处理规则对各个类别的电力数据进行标准化处理和关联处理,并将处理后的电力数据按照业务应用需求进行分类存储;数据计算模块,根据业务应用需求从数据存储模块获取对应的目标电力数据,并通过离线数据计算组件或实时数据计算组件对目标电力数据进行计算,得到计算结果;分析服务模块,获取计算结果,并对计算结果进行分析,将分析结果按照预设输出形式进行输出。本发明能够消除数据冗余,提高跨专业数据一致性与时效性。
0/0