一种数据质量校验规则提取方法及系统

    公开(公告)号:CN113987190A

    公开(公告)日:2022-01-28

    申请号:CN202111356033.6

    申请日:2021-11-16

    摘要: 本发明公开了一种数据质量校验规则提取方法及系统,方法包括:扫描元数据,获取数据类型为文本型的字段,标记字段描述中含有取值范围信息的字段并存储取值范围信息;根据元数据信息,扫描文本型字段值,生成字段的值结构与每种值结构的取值占比;对字段生成的值结构类别进行评分,选出其中的可信类别;然后利用可信值结构类别和元数据信息生成字段取值质量校验规则;最后将校验规则入库,生成字段‑规则映射关系,从而实现了文本型数据质量校验规则的有效提取。与现有规则生成方法相比,本发明能大幅提高数据质量规则生成效率和准确度,减轻劳动力,具有更高的实用价值。