-
公开(公告)号:CN115577034B
公开(公告)日:2023-04-04
申请号:CN202211451519.2
申请日:2022-11-21
申请人: 中国电子信息产业集团有限公司
IPC分类号: G06F16/25 , G06F16/242 , G06F16/22 , G06N20/00
摘要: 本发明提出了一种基于数据体系的联邦计算系统及方法,联邦计算系统,包括:用户端、数据库、计算引擎及联邦计算基础服务,用户端基于联邦计算任务发起SQL语句,包括用于获取数据集的标准SQL语句和用于描述计算模型的扩展SQL语句;数据库用于存储联邦计算所需数据集及存储数据结果;计算引擎用于解析接收的SQL语句,获取工作流,并基于工作流和预置的参数模板配置生成工作流任务;联邦计算基础服务用于接收并执行工作流任务,并经计算结果经计算引擎存储至数据库。本发明从数据体系出发,去描述联邦计算。可以用SQL语言完整、清晰、准确的描述联邦计算的各个阶段,编排各种任务,实现从训练到预测,到模型发布等全生命周期的管理。
-
公开(公告)号:CN115221011A
公开(公告)日:2022-10-21
申请号:CN202211146641.9
申请日:2022-09-21
申请人: 中国电子信息产业集团有限公司
摘要: 本申请公开了一种数据元件流通调用异常监控方法及装置,包括如下步骤:利用孤立森林模型,从提取到的特征数据中,随机选择多个数据点作为子样本,放入一棵孤立树的根节点;随机指定一个数据元件的特征维度,基于切割点生成的超平面,将当前数据空间切割为两个子空间;基于切割点,将各数据点分别放入两个子空间对应的分支,由此构造叶子节点;基于形成的任一棵孤立树,计算数据元件调用异常分数;对于特征数据的各子样本,基于各孤立树的异常分数,计算综合分数;在综合分数超过预预设阈值的情况下,确定数据元件的行为存在异常。本申请实现了自动发现数据元件调用方的异常行为,自动预警,并且无需管理员配置各种复杂的异常行为的策略。
-
公开(公告)号:CN114153367B
公开(公告)日:2022-06-17
申请号:CN202210123100.8
申请日:2022-02-10
申请人: 中国电子信息产业集团有限公司
IPC分类号: G06F3/0486 , G06F8/34 , G06F8/38
摘要: 本发明公开了一种快速替代连接关系的交互方法、设备及可读存储介质。快速替代连接关系的交互方法,包括:监测第一显示界面中的拖拽动作,并确定被拖拽组件;当被拖拽组件被拖拽至第二显示界面中所显示的可视化流程中的任一流程组件处时,将被拖拽组件替换该流程组件。采用本发明,通过拖拽操作方式,将新的组件直接拖拽到原有的组件区域即可完成组件替代,无需重新连线构建连接关系,可以大大减少用户的配置操作,提高用户体验性。
-
公开(公告)号:CN113434488A
公开(公告)日:2021-09-24
申请号:CN202110984704.7
申请日:2021-08-26
申请人: 中国电子信息产业集团有限公司
IPC分类号: G06F16/21 , G06F16/215 , G06F16/28
摘要: 本发明提出了一种基于数据流通的数据要素操作系统及操作方法,系统包括:数据清洗治理平台、数据资源管理平台、数据元件管理平台及数据流通平台,数据清洗治理平台用于对归集数据进行清洗加工,形成数据资源存储在数据仓库中;数据资源管理平台用于对数据仓库进行统筹管理,实现数据资源的统一调度、数据溯源及数仓模型管理功能;数据元件管理平台用于对数据元件开发生产的管理,提供数据元件开发环境,基于数据资源开发数据元件,并对数据元件进行统一调度管理,对生成的数据元件进行分级分类和元件上架;数据流通平台用于面向数据应用开发商提供数据元件交易服务。本发明为数据要素汇聚、加工、定价、流通交易一体化奠定了重要基础。
-
公开(公告)号:CN115550066B
公开(公告)日:2023-04-04
申请号:CN202211495726.8
申请日:2022-11-28
申请人: 中国电子信息产业集团有限公司
IPC分类号: H04L9/40
摘要: 本发明提出了一种数据要素安全加密计算方法及装置,方法包括:获取至少一个数据元件以及非元件计算数据,数据元件以及非元件计算数据用于离线状态下的加密计算;利用非元件计算数据以及数据元件进行加密计算,并输出计算结果,其中,当加密计算过程中,出现不符合预先配置的安全规则的状态时,拒绝当前的加密计算过程。本发明利用预先配置的安全规则对数据元件以及非元件数据的计算过程进行处理,整个加密计算过程可以离线完成,不需要联网,提升了方法执行主体系统的安全性,并且,通过主动拒绝有风险的计算过程,避免了可能导致被反向运算的操作,以及,通过对数据元件进行不定期修改数据加密方式,降低被破解的可能性,增加数据存储安全性。
-
公开(公告)号:CN115544064A
公开(公告)日:2022-12-30
申请号:CN202211478684.7
申请日:2022-11-24
申请人: 中国电子信息产业集团有限公司
IPC分类号: G06F16/242 , G06F16/2453 , G06F16/2455
摘要: 本发明提出了一种基于自定义优化规则的数据优化方法,包括:响应于用户输入的sql语句,查询预先配置的优化规则列表中是否存在与sql语句匹配的优化规则;当优化规则列表中不存在与sql语句匹配的优化规则时,基于sql语句,通过DDL方式创建与sql语句匹配的自定义优化规则;将自定义优化规则注册到优化规则列表中;利用自定义优化规则,对sql语句进行优化。本发明是通过DDL的方式实现了优化器自定义规则的创建以及后续注册;并且,通过本发明实施例所提供的方法,优化器规则的新增和删除不需要修改优化器内核,独立于其他优化器规则,减少开发和测试成本。
-
公开(公告)号:CN115221893A
公开(公告)日:2022-10-21
申请号:CN202211146627.9
申请日:2022-09-21
申请人: 中国电子信息产业集团有限公司
IPC分类号: G06F40/30 , G06N20/00 , G06F16/35 , G06F16/36 , G06F40/284 , G06F40/295
摘要: 本申请公开了一种基于规则与语义分析的质检规则自动化配置方法及装置,包括:获取数据元件结果信息;对获取的数据元件结果字段名称信息进行关键词匹配和实体识别,以初步检测出需要独立质检的第一字段信息;对需要独立质检的第一字段信息的取值进行判断,以确定所述第一字段信息的类型和特征;根据所述第一字段信息的类型和特征,利用预先构建的树模型,以识别出数据元件结果中需要独立质检的第二字段信息;基于识别出的第二字段信息的字段信息项,确定所述第二字段信息对应的落标权限;根据所确定出的落标权限配置相应的质检规则算子。本申请实施例通过对数据资源进行自动化配置质检规则,极大提高政务数据质检效率和调度能力。
-
公开(公告)号:CN114153445A
公开(公告)日:2022-03-08
申请号:CN202210119487.X
申请日:2022-02-09
申请人: 中国电子信息产业集团有限公司
IPC分类号: G06F8/34 , G06F3/0481
摘要: 本发明公开了一种通过批量选择组件实现快速生成连接关系的方法,本发明是结合不同的布局模板来建立所需的连接关系图,然后再基于用户选择的组件的顺序,将所选择的组件对应填充到连接关系图内,最终得到附带组件的连接关系图。从整体角度来讲,由于本发明是适配不同的布局形式的布局模板,所以本发明能够减少传统单个组件挨个拖拽、连线所造成的交互步骤多,操作繁琐等等问题,另外由于本发明能够有效避免手工拖拽布局带来的随意性,所以本发明还能进一步地减少手工布局可能带来的混乱、交叉以及二次调整等等问题。
-
公开(公告)号:CN116521643A
公开(公告)日:2023-08-01
申请号:CN202310112605.9
申请日:2023-02-14
申请人: 中国电子信息产业集团有限公司
摘要: 本申请公开了一种基于孪生平台支持多执行引擎的数据处理方法及设备,包括:通过数据要素交易平台的数据元件接口,根据各数据元件的token,拉取数据元件结果到所述孪生平台的消息队列中;调用复杂事件处理模块,基于所述消息队列中的数据元件结果,触发相关联的业务模型,以基于所述业务模型执行相应的操作,并将执行结果写入数据资产库中。本申请实施例能够克服原始数据的安全性和合规性问题,并基于孪生平台实现支持多执行引擎的调度和任务执行。
-
公开(公告)号:CN115509549B
公开(公告)日:2023-03-24
申请号:CN202211469761.2
申请日:2022-11-23
申请人: 中国电子信息产业集团有限公司
摘要: 本发明公开了一种数据元件加工处理方法及计算机可读存储介质,本发明是给不同类型的资源服务器节点维护不同的群标识GroupID,不同类型的资源空间和资源服务器节点建立对应关系,对应的服务绑定合适的资源空间和资源服务器节点,在部署过程中,基于服务的不同类型,选择不同的匹配条件,以保证计算资源的机器不会和应用资源机器共享,从而实现数据元件加工部署的全自动化,同时简化整个部署步骤,进而提高部署效率提升用户体验。
-
-
-
-
-
-
-
-
-