一种电网数据ETL的优化方法及设备
摘要:
本发明涉及一种电网数据ETL的优化方法及设备。其方法部分主要包括:设定ETL调度服务器以及多个用于进行ETL处理的ETL处理服务器;各个ETL处理服务器在即将进行ETL处理时,向ETL调度服务器发送自身待处理的ETL数据清单;ETL调度服务器根据所述ETL数据清单上记录的各项业务的数据量的百分比来确定对各项业务进行ETL处理的ETL处理服务器;各个ETL处理服务器将相应业务的数据转移至ETL调度服务器确定的对相应业务进行ETL处理的ETL处理服务器,以进行ETL处理。本发明采用的方法可以优化网络数据的同步,提升数据转移效率,节约网络资源。
0/0