分布式计算框架的任务调派系统
摘要:
本申请公开一种分布式计算框架的任务调派系统,其中包括应用服务器、任务队列服务平台与Redis服务平台。应用服务器用于部署多个业务处理服务;任务队列服务平台由多个任务服务器透过网路集群,任务队列服务平台中部署zookeeper服务,任务调度操作用于处理zookeeper服务的消息队列的新的客户任务;由多个Redis服务器透过网路连接构成,Redis服务平台经由网路连接于任务队列服务平台,Redis服务平台根据新加入消息队列中的客户任务调用处理进程,处理进程对客户任务进行清洗并输出第一业务结果存储至Redis缓存存储器中;Redis服务平台的实时计算模块侦测Redis缓存存储器中存在新的第一业务结果,实时计算模块对第一业务结果进行计算并输出第二业务结果。
公开/授权文献
0/0