一种电网工程数据汇集方法
摘要:
本发明提出的是一种电网工程数据汇集方法。针对电网工程多源异构数据设计了一种新的数据汇集方法,该方法包括多源异构数据获取、细粒度数据清洗、多维度数据标准化和自动化数据存储等步骤;其中,多源异构数据获取主要是对现有的多源异构数据进行获取和处理,数据来源分为结构化数据、半结构化数据,对于半结构化数据需要定义特定规则进行数据抓取;细粒度数据清洗包括数据筛选、数据过滤和数据校核,并将不同源的数据进行对比和校核,以尽量达到数据的正确融合;多维度数据标准化是将清洗后的数据进行多维度的标准化、归一化;最后数据可经过自定义的设计流程自动存储到目标数据库,该方法有利于电网工程的大数据管理。
0/0