- 专利标题: 数据存储方法、电子设备及机器可读存储介质
-
申请号: CN201910907241.7申请日: 2019-09-24
-
公开(公告)号: CN110704435B公开(公告)日: 2022-08-09
- 发明人: 郝向东
- 申请人: 新华三大数据技术有限公司
- 申请人地址: 河南省郑州市高新技术产业开发区杜英街166号总部大观B18号楼
- 专利权人: 新华三大数据技术有限公司
- 当前专利权人: 新华三大数据技术有限公司
- 当前专利权人地址: 河南省郑州市高新技术产业开发区杜英街166号总部大观B18号楼
- 代理机构: 北京超成律师事务所
- 代理商 许书音
- 主分类号: G06F16/22
- IPC分类号: G06F16/22 ; G06F16/25
摘要:
本申请实施例提出一种数据存储方法、电子设备及机器可读存储介质。电子设备获取需要写入数据表的第一数据,获取第一数据的数据源对应的指纹计算模板,根据指纹计算模板和第一数据计算第一数据的第一指纹,根据数据源从查重表中查找来自该数据源的第二数据的第二指纹,判断查找到的第二指纹与第一指纹是否相同,如果相同,则删除第一数据。如此,可以基于查重表实现数据的快速查重、去重和存储,查重过程不必查询数据表,不必在数据表上为不同数据源分别建立索引来加快查询数据表的速度,避免了对数据表上的多个索引进行动态维护所导致的数据表写入性能差的问题,且节约了数据表上索引占据的物理空间和维护开销。
公开/授权文献
- CN110704435A 数据存储方法、电子设备及机器可读存储介质 公开/授权日:2020-01-17