一种基于异步启动的Hadoop优化方法
摘要:
本发明公开了一种基于异步启动的Hadoop优化方法通过将作业从串行执行改为部分并发执行,使得其整个作业执行过程得到优化,大大提升迭代运算的速度,有效提升执行效率。本发明不需要修改底层的代码,使用方便,而且能提高集群的利用率,没有内存空间的瓶颈。本发明作为一种基于异步启动的Hadoop优化方法可广泛应用于Hadoop架构技术中。
公开/授权文献
0/0