基于Storm的流计算即时处理系统
摘要:
本发明公开了一种基于Storm的流计算即时处理系统,其包括四个部分,第一部分是数据接入该部分从前端业务系统获取数据;第二部分是最重要的Storm实时处理部分,数据从接入层接入,经过实时处理后传入数据落地层;第三部分为数据落地层,该部分指定了数据的落地方式;第四部分元数据管理器。通过对实际业务需求的调研以及算法的研究,形成满足实际业务的数据处理规则库,根据用户预定义的事件模型,实时高效地检测基本事件,直到组成事件模型的所有基本事件被检测到。本发明适用于处理对符合电网业务数据特征的数据流实时性要求极高的复杂分析计算,可达到加快数据分析速度、实时分析计算的目的。
0/0