数据网关及基于数据网关的数据服务方法

    公开(公告)号:CN116244332A

    公开(公告)日:2023-06-09

    申请号:CN202310081436.7

    申请日:2023-01-13

    摘要: 本申请公开一种数据网关及基于数据网关的数据服务方法,数据网关包括:协议层,用于提供统一的数据查询接口协议,以在接收到针对不同数据源的数据查询请求时,基于数据查询接口协议获得数据查询请求对应的SQL查询语句;SQL解析器,用于对SQL查询语句进行解析,以提取SQL查询语句中的基础信息;执行器,用于根据基础信息确定待访问的目标数据库,并生成目标数据库可执行的目标SQL查询语句;数据流连接器,用于对目标SQL查询语句执行数据查询操作,以从目标数据库中得到数据查询结果,并将数据查询结果返回至执行器;执行器还用于对数据查询结果进行统一化处理,以转化成通用数据格式的数据查询结果,并将通用数据格式的数据查询结果进行输出。

    数据异常检测的方法、装置、电子设备及存储介质

    公开(公告)号:CN116010897A

    公开(公告)日:2023-04-25

    申请号:CN202310125877.2

    申请日:2023-02-07

    发明人: 陈明 王嘉楠 陈睿

    摘要: 提供一种数据异常检测的方法、装置、设备以及存储介质。该数据异常检测的方法,包括:获取待检测的时序数据源;根据所述时序数据源的时序分布,在预先注册的至少一个检测算法中确定用于检测所述时序数据源的目标检测算法;获取所述目标检测算法的参数配置;根据所述参数配置调用所述目标检测算法对所述时序数据源进行检测,确定所述时序数据源是否存在异常数据。本申请能够实现程序化的数据异常自动检测,有利于提高数据异常检测的时效性、准确性和灵活性。

    数据处理方法、装置、设备及存储介质

    公开(公告)号:CN118394855A

    公开(公告)日:2024-07-26

    申请号:CN202410313759.9

    申请日:2024-03-19

    摘要: 本申请公开一种数据处理方法、装置、设备及存储介质,方法包括:从业务数据源中获取原始数据;从原始数据中提取出实体关系数据,其中,每条实体关系数据包含有对应的实体属性数据、主体标识与客体标识;针对任意一条实体关系数据,以实体关系数据中的主体标识以及客体标识作为联合主键,基于实体关系数据生成实体关系表;将实体关系表存储于目标数据库中;响应于实体查询请求,从目标数据库中获取与实体查询请求对应的目标实体关系数据。本申请可以支持全新的数据存储结构,得到更多维度的关系描述,且能提升数据的时效性,以及能够提升数据查询速率。

    数据处理的方法、装置、电子设备及存储介质

    公开(公告)号:CN116166268A

    公开(公告)日:2023-05-26

    申请号:CN202310115678.3

    申请日:2023-01-31

    发明人: 陈明 陈睿 罗伟

    IPC分类号: G06F8/41 G06F8/71

    摘要: 提供一种数据处理的方法、装置、设备以及存储介质。该数据处理的方法,包括:获取计算任务代码对应的结构化查询语言SQL语句;其中,所述计算任务代码包括SQL语句、Java语句和Python语句中的至少一种;解析所述SQL语句得到抽象语法树;对所述抽象语法树进行分析,提取所述计算任务相关的数据模块的数据依赖关系。本申请有利于对不同系统框架中的计算任务,获取数据模块之间的数据依赖关系。

    摘要生成方法、装置、设备及介质

    公开(公告)号:CN118568252A

    公开(公告)日:2024-08-30

    申请号:CN202410446359.5

    申请日:2024-04-15

    摘要: 本申请公开了一种摘要生成方法、装置、设备及介质,其中,方法包括:基于待分析公告文件的公告文件类型确定目标处理流程,其中,不同的公告文件类型对应不同的处理流程;基于目标处理流程对待分析公告文件进行文本提取,得到待分析公告文件对应的目标文本信息;判断目标文本信息的长度是否大于预设长度阈值;若是,根据目标文本信息获取待分析公告文件对应的初始摘要,调用第一预设摘要生成模型对初始摘要进行摘要生成,得到待分析公告文件对应的目标摘要;若否,调用第一预设摘要生成模型对目标文本信息进行摘要生成,得到待分析公告文件对应的目标摘要。本申请各实施例提供的技术方案,可起到提高用户获取公告文件信息的效率和体验的作用。

    应用数据校验方法、装置、设备、存储介质及程序产品

    公开(公告)号:CN116302878A

    公开(公告)日:2023-06-23

    申请号:CN202310122426.3

    申请日:2023-02-07

    IPC分类号: G06F11/34

    摘要: 本申请提供了一种应用数据校验方法、装置、设备、存储介质及程序产品,包括:确定待采集埋点数据,并根据待采集埋点数据确定目标校验规则;向数据采集方发送待采集埋点数据;接收数据采集方上报的目标埋点数据,目标埋点数据是数据采集方根据待采集埋点数据采集的数据;根据目标校验规则对目标埋点数据进行校验。以使得校验规则和埋点数据具有对应关系,即保证校验规则可以适应于对埋点数据的校验,解决对埋点数据进行校验时,数据无法对齐、埋点数据频繁变更的问题,提高埋点数据校验的准确性。