Invention Publication
- Patent Title: 一种数据收集和预处理方法及系统
-
Application No.: CN202410435626.9Application Date: 2024-04-11
-
Publication No.: CN118277728APublication Date: 2024-07-02
- Inventor: 王磊 , 张云翔 , 相增辉 , 田然 , 陈轩 , 高华 , 李瑾辉 , 赵厚滨 , 刘雷 , 戴文杰
- Applicant: 国网江苏省电力有限公司信息通信分公司
- Applicant Address: 江苏省南京市北京西路20号
- Assignee: 国网江苏省电力有限公司信息通信分公司
- Current Assignee: 国网江苏省电力有限公司信息通信分公司
- Current Assignee Address: 江苏省南京市北京西路20号
- Agency: 安徽歌途知识产权代理事务所
- Agent 向杰
- Main IPC: G06F18/10
- IPC: G06F18/10 ; G06F18/24 ; G06F18/22 ; G06F16/215 ; G06F16/25

Abstract:
本发明公开了一种数据收集和预处理方法及系统,包括数据获取单元、数据转换单元、数据存储单元和信息输出单元,本发明涉及数据预处理技术领域,解决了不能根据不同数据的特征来进行预处理操作,且存储的时候不同容量大小的数据统一存储对整体的读取速度造成影响的技术问题,本发明通过判断不同数据是否能够进行统一格式的转换来将其进行不同的分类,针对能够进行统一格式转换的格式通过对其容量分析来进行存储,针对不能够进行转换的数据通过对其容量和读取速度的分析来进行存储,通过不同的存储方式来进行存储,一方面能够保证数据预处理的合理性,另一方面能够根据不同数据的特性来存储,合理的规划存储空间。
Information query