一种数据收集和预处理方法及系统
Abstract:
本发明公开了一种数据收集和预处理方法及系统,包括数据获取单元、数据转换单元、数据存储单元和信息输出单元,本发明涉及数据预处理技术领域,解决了不能根据不同数据的特征来进行预处理操作,且存储的时候不同容量大小的数据统一存储对整体的读取速度造成影响的技术问题,本发明通过判断不同数据是否能够进行统一格式的转换来将其进行不同的分类,针对能够进行统一格式转换的格式通过对其容量分析来进行存储,针对不能够进行转换的数据通过对其容量和读取速度的分析来进行存储,通过不同的存储方式来进行存储,一方面能够保证数据预处理的合理性,另一方面能够根据不同数据的特性来存储,合理的规划存储空间。
Patent Agency Ranking
0/0