基于数据中台的业务数据智能存储方法及系统

    公开(公告)号:CN116821428A

    公开(公告)日:2023-09-29

    申请号:CN202311090784.7

    申请日:2023-08-29

    IPC分类号: G06F16/901 G06F16/906

    摘要: 本发明公开了基于数据中台的业务数据智能存储方法及系统,涉及数据存储处理技术领域,所述方法包括:基于数据标识规则对业务异构数据信息进行标识,获得业务数据标识信息;按照业务数据标识信息对所述业务异构数据信息进行整合、分流,获得业务数据处理流向信息;基于业务数据处理流向信息对业务异构数据信息进行分支预处理,生成标准业务数据信息;将标准业务数据信息进行数据编码压缩,得到业务资产压缩数据信息;将业务资产压缩数据信息进行标签化存储,并基于数据服务层对所述业务资产压缩数据信息进行调用服务。达到利用业务数据标识实现数据分流处理,保证数据存储处理准确性和存储处理标准化,进而提高数据存储效率的技术效果。

    应用于数字城市的数据挖掘方法及系统

    公开(公告)号:CN117421459A

    公开(公告)日:2024-01-19

    申请号:CN202311714591.4

    申请日:2023-12-14

    IPC分类号: G06F16/903

    摘要: 本发明提供的应用于数字城市的数据挖掘方法及系统,涉及人工智能技术领域。在本发明中,提取到第一群体行为数据和第二群体行为数据,将第一群体行为数据和第二群体行为数据分别进行挖掘,输出第一群体行为向量和第二群体行为向量;将第一群体行为向量和第二群体行为向量进行聚合,形成初始多维度行为向量;提取到行为需求关系向量;分别将行为需求关系向量中的各群体行为需求向量和初始多维度行为向量进行聚合,输出目标多维度行为向量;基于每一个群体行为需求信息对应的目标多维度行为向量,在多个群体行为需求信息中,筛选出目标群体行为需求信息。基于上述内容,可以改善需求挖掘的可靠度相对不高的问题。

    一种程序异常文本信息维护方法、装置及存储介质

    公开(公告)号:CN116860312B

    公开(公告)日:2023-11-07

    申请号:CN202311136974.8

    申请日:2023-09-05

    摘要: 本公开提供一种程序异常文本信息维护方法、装置及存储介质,通过程序异常类型识别算法自动识别目标异常描述文本的程序异常类型,以根据识别结果维护异常数据库中的程序异常类型,用户仅需抛出异常信息即可自动生成对应异常类型的多语言版本,提高了用户在程序编写时异常处理的便利性和效率,而基于嵌入的程序异常类型识别算法进行目标程序异常类型识别时,高效准确,提高效率。程序异常类型识别算法在训练时,将复杂大算法的知识过渡到轻巧小模型以完成知识蒸馏,训练过程依据异常挖掘网络为过渡实现,解放了异常识别迁移前算法和异常识别迁移后算法的算法结构,算法的适配性能力强,异常识别迁移后算法的程序异常确定的可靠性也得到提高。

    提升业务数据存储安全性的方法及系统

    公开(公告)号:CN117473538B

    公开(公告)日:2024-03-12

    申请号:CN202311814140.8

    申请日:2023-12-27

    IPC分类号: G06F21/60 G06F21/64 G06F21/78

    摘要: 本发明公开了一种提升业务数据存储安全性的方法及系统,涉及数据处理技术领域,该方法包括:对目标存储器进行使用参数采集和分析,获取目标存储器内多个块的使用均衡性信息和多个使用信息;根据使用均衡性信息,决策获取划分粒度信息,对目标业务数据进行划分,获得多个数据块;根据多个数据块的数据重要性,分配获得多个重要性信息;对多个数据块的存储位置和加密方案进行优化,获取最优加密存储方案,进行数据加密和存储。本发明解决了现有技术中由于数据访问不均衡导致存储块磨损,造成数据丢失,影响业务数据存储的安全性的技术问题,达到了通过分块粒度分析,优化数据块存储位置和加密方案,提高业务数据存储的安全性的技术效果。

    应用于数字城市的数据挖掘方法及系统

    公开(公告)号:CN117421459B

    公开(公告)日:2024-02-23

    申请号:CN202311714591.4

    申请日:2023-12-14

    IPC分类号: G06F16/903

    摘要: 本发明提供的应用于数字城市的数据挖掘方法及系统,涉及人工智能技术领域。在本发明中,提取到第一群体行为数据和第二群体行为数据,将第一群体行为数据和第二群体行为数据分别进行挖掘,输出第一群体行为向量和第二群体行为向量;将第一群体行为向量和第二群体行为向量进行聚合,形成初始多维度行为向量;提取到行为需求关系向量;分别将行为需求关系向量中的各群体行为需求向量和初始多维度行为向量进行聚合,输出目标多维度行为向量;基于每一个群体行为需求信息对应的目标多维度行为向量,在多个群体行为需求信息中,筛选出目标群体行为需求信息。基于上述内容,可以改善需求挖掘的可靠度相对不高的问题。

    提升业务数据存储安全性的方法及系统

    公开(公告)号:CN117473538A

    公开(公告)日:2024-01-30

    申请号:CN202311814140.8

    申请日:2023-12-27

    IPC分类号: G06F21/60 G06F21/64 G06F21/78

    摘要: 本发明公开了一种提升业务数据存储安全性的方法及系统,涉及数据处理技术领域,该方法包括:对目标存储器进行使用参数采集和分析,获取目标存储器内多个块的使用均衡性信息和多个使用信息;根据使用均衡性信息,决策获取划分粒度信息,对目标业务数据进行划分,获得多个数据块;根据多个数据块的数据重要性,分配获得多个重要性信息;对多个数据块的存储位置和加密方案进行优化,获取最优加密存储方案,进行数据加密和存储。本发明解决了现有技术中由于数据访问不均衡导致存储块磨损,造成数据丢失,影响业务数据存储的安全性的技术问题,达到了通过分块粒度分析,优化数据块存储位置和加密方案,提高业务数据存储的安全性的技术效果。

    一种程序异常文本信息维护方法、装置及存储介质

    公开(公告)号:CN116860312A

    公开(公告)日:2023-10-10

    申请号:CN202311136974.8

    申请日:2023-09-05

    摘要: 本公开提供一种程序异常文本信息维护方法、装置及存储介质,通过程序异常类型识别算法自动识别目标异常描述文本的程序异常类型,以根据识别结果维护异常数据库中的程序异常类型,用户仅需抛出异常信息即可自动生成对应异常类型的多语言版本,提高了用户在程序编写时异常处理的便利性和效率,而基于嵌入的程序异常类型识别算法进行目标程序异常类型识别时,高效准确,提高效率。程序异常类型识别算法在训练时,将复杂大算法的知识过渡到轻巧小模型以完成知识蒸馏,训练过程依据异常挖掘网络为过渡实现,解放了异常识别迁移前算法和异常识别迁移后算法的算法结构,算法的适配性能力强,异常识别迁移后算法的程序异常确定的可靠性也得到提高。

    基于数据中台的业务数据智能存储方法及系统

    公开(公告)号:CN116821428B

    公开(公告)日:2023-11-07

    申请号:CN202311090784.7

    申请日:2023-08-29

    IPC分类号: G06F16/901 G06F16/906

    摘要: 本发明公开了基于数据中台的业务数据智能存储方法及系统,涉及数据存储处理技术领域,所述方法包括:基于数据标识规则对业务异构数据信息进行标识,获得业务数据标识信息;按照业务数据标识信息对所述业务异构数据信息进行整合、分流,获得业务数据处理流向信息;基于业务数据处理流向信息对业务异构数据信息进行分支预处理,生成标准业务数据信息;将标准业务数据信息进行数据编码压缩,得到业务资产压缩数据信息;将业务资产压缩数据信息进行标签化存储,并基于数据服务层对所述业务资产压缩数据信息进行调用服务。达到利用业务数据标识实现数据分流处理,保证数据存储处理准确性和存储处理标准化,进而提高数据存储效率的技术效果。