-
公开(公告)号:CN113901004B
公开(公告)日:2023-06-02
申请号:CN202111253174.5
申请日:2021-10-27
Applicant: 江苏瑞中数据股份有限公司 , 南瑞集团有限公司
Abstract: 本发明公开了一种数据中台化的大数据复杂实时计算的方法,包括以下步骤:(1)增量表的处理;(2)增量数据和全量数据的处理。本方法通过增量日志表的处理,实现了大数据复杂实时计算;本方法可以支撑实时报表、实时看板的数据需求;本方法在原有架构的基础之上,充分调度空闲资源,没有新增任何额外组件成本;本方法充分考虑业务与增量操作的关系,减少程序运行复杂度,大幅度缩短程序调度时间。
-
公开(公告)号:CN113901004A
公开(公告)日:2022-01-07
申请号:CN202111253174.5
申请日:2021-10-27
Applicant: 江苏瑞中数据股份有限公司 , 南瑞集团有限公司
Abstract: 本发明公开了一种数据中台化的大数据复杂实时计算的方法,包括以下步骤:(1)增量表的处理;(2)增量数据和全量数据的处理。本方法通过增量日志表的处理,实现了大数据复杂实时计算;本方法可以支撑实时报表、实时看板的数据需求;本方法在原有架构的基础之上,充分调度空闲资源,没有新增任何额外组件成本;本方法充分考虑业务与增量操作的关系,减少程序运行复杂度,大幅度缩短程序调度时间。
-