Invention Grant
- Patent Title: 一种基于数据科学的智能化数据质量稽核系统及方法
-
Application No.: CN202110671379.9Application Date: 2021-06-17
-
Publication No.: CN113591485BPublication Date: 2024-07-12
- Inventor: 黄建平 , 张旭东 , 王红凯 , 张建松 , 沈思琪 , 陈可 , 谢裕清 , 冯珺 , 阳东 , 刘晓枫 , 丁雪花 , 蒋斌
- Applicant: 国网浙江省电力有限公司 , 国网浙江省电力有限公司信息通信分公司 , 浙江华云信息科技有限公司
- Applicant Address: 浙江省杭州市黄龙路8号; ;
- Assignee: 国网浙江省电力有限公司,国网浙江省电力有限公司信息通信分公司,浙江华云信息科技有限公司
- Current Assignee: 国网浙江省电力有限公司,国网浙江省电力有限公司信息通信分公司,浙江华云信息科技有限公司
- Current Assignee Address: 浙江省杭州市黄龙路8号; ;
- Agency: 杭州华鼎知识产权代理事务所
- Agent 项军
- Main IPC: G06F40/30
- IPC: G06F40/30 ; G06F40/289 ; G06F40/242 ; G06V10/42 ; G06V10/75 ; G06V10/762 ; G06N3/04 ; G06N3/08

Abstract:
本发明公开了一种基于数据科学的智能化数据质量稽核系统及方法,方法包括:数据采集:进行检测对象元数据采集以及日志数据采集解析;数据特征提取:识别并剔除无效表和无效字段,同时通过修订算法根据数据内容对字段类型进行自动修订,根据字段类型提取特征;异常检测:预设数据异常检测方法库,与数据特征进行匹配以选取对应的异常检测方法并检测;任务调度编排:设置编排服务器和节点服务器,编排服务器根据任务请求将上述任务拆分为若干子步后分发给不同节点服务器处理。本发明提降低了数据资产管理和数据质量治理的门槛,实现数据质量稽核的通用性、规模化、自动化以及智能化,整体提升数据质量稽核的效率与工作质量。
Public/Granted literature
- CN113591485A 一种基于数据科学的智能化数据质量稽核系统及方法 Public/Granted day:2021-11-02
Information query