- 专利标题: 一种对大规模可再生能源数据进行快速概率建模方法
- 专利标题(英): Method for carrying out rapid probability modeling on large-scale renewable energy source data
-
申请号: CN201710856461.2申请日: 2017-09-20
-
公开(公告)号: CN107609141A公开(公告)日: 2018-01-19
- 发明人: 宋杰 , 周健 , 鲍伟 , 杨燕 , 余娟 , 冯斐 , 张晓颖 , 熊祥鸿 , 张奕 , 项旭杨 , 顾薇薇 , 沈冰 , 潘爱强 , 周德生 , 周卓懿 , 曾平 , 徐洁 , 邹晓峰 , 杜炤鑫 , 朱奕帆
- 申请人: 国网上海市电力公司 , 华东电力试验研究院有限公司 , 重庆大学
- 申请人地址: 上海市浦东新区源深路1122号
- 专利权人: 国网上海市电力公司,华东电力试验研究院有限公司,重庆大学
- 当前专利权人: 国网上海市电力公司,华东电力试验研究院有限公司,重庆大学
- 当前专利权人地址: 上海市浦东新区源深路1122号
- 代理机构: 上海信好专利代理事务所
- 代理商 朱成之; 周乃鑫
- 主分类号: G06F17/30
- IPC分类号: G06F17/30 ; G06F17/50 ; G06N7/00 ; G06Q50/06
摘要:
本发明公开了一种对大规模可再生能源数据进行快速概率建模方法,包含以下过程:基于Spark和HDFS为新能源快速建模搭建分布式并行框架,使该框架与可再生能源现有的存储系统兼容;利用RDD容错和基于内存计算的特点,构建求解Wakeby分布的血缘图,从而实现基于RDD的新型Wakeby分布快速估计算法;推导了该并行估计算法的计算时间与样本数据量以及Spark两个重要的可调参数的函数关系。发明推导的算法的时间消耗与样本大小、并行度、分区数的函数关系有助于在给定的样本数据量下帮助程序员在Spark平台上程序调优、在给定配置下的时间消耗预测以及在期望时间下的硬件配置。
公开/授权文献
- CN107609141B 一种对大规模可再生能源数据进行快速概率建模方法 公开/授权日:2020-07-31