发明公开
- 专利标题: 基于Python的数据处理和分析系统及方法
-
申请号: CN202310836692.2申请日: 2023-07-10
-
公开(公告)号: CN116860891A公开(公告)日: 2023-10-10
- 发明人: 叶昕瑶 , 王彦功 , 张晓明 , 朱家兵 , 张悦 , 王飞
- 申请人: 浪潮软件科技有限公司
- 申请人地址: 山东省济南市高新区浪潮路1036号浪潮科技园
- 专利权人: 浪潮软件科技有限公司
- 当前专利权人: 浪潮软件科技有限公司
- 当前专利权人地址: 山东省济南市高新区浪潮路1036号浪潮科技园
- 代理机构: 济南信达专利事务所有限公司
- 代理商 潘悦梅
- 主分类号: G06F16/28
- IPC分类号: G06F16/28 ; G06F16/23 ; G06F16/25 ; G06F16/215 ; G06F16/18 ; G06F16/26 ; G06Q10/04 ; G06Q50/10
摘要:
本发明公开了基于Python的数据处理和分析系统及方法,属于数据处理技术领域,要解决的技术问题为如何基于Python提供一种能够满足多种业务场景以及需求的数据处理和分析方法。包括数据接入模块、检查更新模块、数据读取模块、数据处理模块、数据写入模块、预测分析模块、日志输出模块以及代码结构模块,针对数据量级以及来源表的周期性更新特点,选择全量或增量模式从来源表读取数据,对读取的数据进行数据清洗、转换和加工后,根据数据量级以及目标表的周期性更新特点,将预处理后数据写入目标表。同时,可基于目标表中历史数据,通过指数平滑算法进行客流量预测,以便加强在高峰期的人员配备,确保用户得到优质服务。