发明公开
- 专利标题： 一种基于BWO和聚类算法的作业资源消耗模式分析方法
-
申请号： CN202411237023.4申请日： 2024-09-05
-
公开(公告)号： CN118779197A公开(公告)日： 2024-10-15
- 发明人: 郭莹 , 孙博文 , 王英龙 , 张虎 , 王继彬
- 申请人： 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
- 申请人地址： 山东省济南市历下区科院路19号;
- 专利权人： 山东省计算中心(国家超级计算济南中心),齐鲁工业大学(山东省科学院)
- 当前专利权人： 山东省计算中心(国家超级计算济南中心),齐鲁工业大学(山东省科学院)
- 当前专利权人地址： 山东省济南市历下区科院路19号;
- 代理机构： 济南金迪知识产权代理有限公司
- 代理商 杨树云
- 主分类号： G06F11/34
- IPC分类号： G06F11/34 ; G06F11/30 ; G06F9/50 ; G06N3/006 ; G06F18/23213 ; G06F18/2415
摘要：
本发明涉及一种基于BWO和聚类算法的作业资源消耗模式分析方法，属于大数据计算技术领域；包括：(1)作业运行与任务调度；(2)工作节点资源指标监控；(3)数据预处理和生成数据集；(4)运行基于白鲸优化算法和K‑prototypes算法的BWO/K‑prototypes算法；(5)BWO/K‑prototypes算法最优解应用；(6)聚类结果分析；(7)Flink作业的资源消耗模式分析结果获取与保存。本发明不仅可以提升Flink集群的执行效率，避免异常抛出；还可以减少资源占用，避免不必要的资源浪费。
