发明公开
- 专利标题: 一种电网数据ETL的优化方法及设备
-
申请号: CN202210958411.6申请日: 2022-08-09
-
公开(公告)号: CN115525700A公开(公告)日: 2022-12-27
- 发明人: 章晓锘 , 方磊 , 孔飘红 , 张静 , 卢敏 , 钱建国 , 裘雨音 , 由甲川 , 刘华蕾 , 李嘉茜
- 申请人: 国网浙江省电力有限公司培训中心 , 国网浙江省电力有限公司
- 申请人地址: 浙江省杭州市拱墅区舟山东路91号;
- 专利权人: 国网浙江省电力有限公司培训中心,国网浙江省电力有限公司
- 当前专利权人: 国网浙江省电力有限公司培训中心,国网浙江省电力有限公司
- 当前专利权人地址: 浙江省杭州市拱墅区舟山东路91号;
- 代理机构: 杭州华鼎知识产权代理事务所
- 代理商 王旭峰
- 主分类号: G06F16/25
- IPC分类号: G06F16/25 ; G06F16/23 ; G06Q50/06
摘要:
本发明涉及一种电网数据ETL的优化方法及设备。其方法部分主要包括:设定ETL调度服务器以及多个用于进行ETL处理的ETL处理服务器;各个ETL处理服务器在即将进行ETL处理时,向ETL调度服务器发送自身待处理的ETL数据清单;ETL调度服务器根据所述ETL数据清单上记录的各项业务的数据量的百分比来确定对各项业务进行ETL处理的ETL处理服务器;各个ETL处理服务器将相应业务的数据转移至ETL调度服务器确定的对相应业务进行ETL处理的ETL处理服务器,以进行ETL处理。本发明采用的方法可以优化网络数据的同步,提升数据转移效率,节约网络资源。