一种应用于离散制造业生产过程的数据采集和编目方法、系统、终端设备及存储介质

    公开(公告)号:CN111752249A

    公开(公告)日:2020-10-09

    申请号:CN202010640262.X

    申请日:2020-07-06

    发明人: 曹亮 刘魁 马启杰

    IPC分类号: G05B19/418

    摘要: 本发明公开了一种应用于离散制造业生产过程的数据采集和编目方法、系统、终端设备及存储介质,所述数据采集和编目方法包括如下步骤:数据采集接入、数据分类并处理、数据清洗过滤、数据信息录入、构建数据模型和数据按需存储。本发明通过屏蔽不同技术的底层技术细节,封装成统一数据接入接口;基于统一接口并针对不同数据来源实现相应数据的接入逻辑,形成数据接入系统的构件库;接入数据的数据定义、数据结构、数据标识、数据编码、数据编目、负责人、来源、转换关系、目标、质量等级、依赖关系、安全权限等相关内容进行管理,最终形成符合统一标准的数据模型;利用系统提供的Paas资源的弹性扩展和动态伸缩机制,实现对大数据的灵活存储。

    基于Ceph的十亿级节点规模知识图谱的对象存储管理方法及系统

    公开(公告)号:CN111639082A

    公开(公告)日:2020-09-08

    申请号:CN202010514803.4

    申请日:2020-06-08

    发明人: 曹亮 刘魁 李超

    IPC分类号: G06F16/22 G06F16/27

    摘要: 本发明公开了基于Ceph的十亿级节点规模知识图谱的对象存储管理方法及系统,方法包括:图存储架构的构建设计,获取与目标业务对应的多个实体的实体数据,并根据实体数据生成所述目标业务对应的知识图谱并进行存储,并以Ceph作为分布式资源存储器,同时新增外部索引后台机制,利用分布式计算引擎将大任务分解成多个子任务,分发给不同机器去执行,完成后汇总,以提供大规模数据处理能力来支撑OLAP需求,供用户基于知识图谱进行数据分析。本发明还提供了基于Ceph的十亿级节点规模知识图谱的对象存储管理系统。本方案引用了分布式资源管理器,具有可扩展和高可用特征,同时能存储和表达海量知识,支持数十亿节点数据量,有着可靠、易用、高效的特性。

    一种通用的异构数据库字段类型的映射方法及系统

    公开(公告)号:CN111625520A

    公开(公告)日:2020-09-04

    申请号:CN202010513360.7

    申请日:2020-06-08

    发明人: 刘魁 曹亮 邓羽平

    IPC分类号: G06F16/21 G06F16/22 G06F16/28

    摘要: 本发明公开了一种通用的异构数据库字段类型的映射方法及系统,建立一个通用的数据库字段类型标准,做到各个数据库的字段类型都能映射到该字段类型标准中从而达到两个不同的数据库字段之间的转换。通过本发明通过不同类型字段建立映射,使得建立不同数据源数据集成的通用模型变得容易,能高效地采集多源数据源数据;其标准通过对多种数据库的字段类型进行分析,提取出一套较为通用的,扩展性良好的,统一的字段标准规范。这套标准适用与绝大多数数据库;拓展性强,每个数据库实现对自定义的标准数据类型映射,增加新的数据库支持实现简单,转换准确,快速,通过自定义的标准规范,实现两个数据库字段类型的转换。

    一种高效的数据采集加载方法及系统

    公开(公告)号:CN111625300A

    公开(公告)日:2020-09-04

    申请号:CN202010514096.9

    申请日:2020-06-08

    发明人: 刘魁 曹亮 邓羽平

    摘要: 本发明公开了一种高效的数据采集加载方法及系统,方法通过对数据的采集和加载两个步骤进行高度的集成化,用户只需要通过可视化页面选择一些必要的参数就能够实现数据采集到数据加载整个数据生命周期运行,实现从不同数据源将数据加载到GreenPlum简化了复杂的采集和加载步骤,自动化的采集和加载流程更加严格的控制了数据从初始地到目标地的安全性,提供的日志和实时监控可以更有效地对流程进行管理。本发明还提供一种高效的数据采集加载系统。通过本方案大幅度减少了用户的操作,通过自动化的方式来调度任务和监控,减少了运维的压力。

    降水量气象报文数据误差修正方法、雨凇景观预测方法

    公开(公告)号:CN107765348B

    公开(公告)日:2020-06-02

    申请号:CN201710995289.9

    申请日:2017-10-23

    IPC分类号: G01W1/14 G01W1/18 G06F17/18

    摘要: 针对现有降水量预测方法存在对局部环境特殊性考虑不足而使预测的数值越容易出现误差的缺陷,本发明提供了一种降水量气象报文数据误差修正方法,用于在起报日修正气象台对公共发布的预测日降水量报文数据Ym,得到预测日降水量修正值Yj。本发明还提供利用降水量气象报文数据误差修正方法实现的雨凇景观预测方法,用于在起报日测算预测日发生雨凇景观的概率,以及对该预测方法中温度值加以修正的优化方法。本发明还提供雨凇景观预测方法在峨眉山景区的适用。本发明方法都是以气象台对公发布的气象预报产品为数据基础,利用气象台针对大区域做出的气象预报产品实现对既定小地区的气象景观发生概率的测算,能够有效利用公共服务数据,具有较高实用性。

    一种通用数据库中自动编号生成方法

    公开(公告)号:CN106649736B

    公开(公告)日:2020-04-17

    申请号:CN201611209107.2

    申请日:2016-12-23

    发明人: 曹亮 舒红平 刘魁

    IPC分类号: G06F16/28

    摘要: 本发明公开了一种通用数据库中自动编号生成方法,所述通用数据库中自动编号生成方法获取指定数据库中的当前编号;根据设定的步长,在当前编号的基础上进行自增得到生成的编号;输出生成的编号并将编号保存至指定的关系数据库中;包括以下步骤:(1)指定需要生成编号的业务表及对应的字段;(2)设置自动编号规则格式;(3)设置自动编号的步长;(4)规则处理;(5)动态生成查询语句;(6)编号生成;(7)输出生成的编号并将编号保存至指定的关系数据库中。本发明的方法简单,操作简单,提高了编号的生成效率。

    一种基于UML需求建模过程用例与活动转换的方法

    公开(公告)号:CN109614096A

    公开(公告)日:2019-04-12

    申请号:CN201811426070.8

    申请日:2018-11-27

    IPC分类号: G06F8/35

    摘要: 本发明公开了一种基于UML需求建模过程用例与活动转换的方法,包括:S1.绘制反映实际业务现状的业务用例图,多种业务用例组成一个完整的业务执行过程;S2.使用活动图描述图业务用例图中每个业务用例具体动态的执行过程,生成业务活动图;S3.将业务活动图中的具体活动转化为系统用例,生成系统用例图;S4.将每个系统用例分解形成反映具体计算机执行过程的系统活动图。本发明保证了用例粒度在各个阶段划分的一致性,为需求建模的标准化、一致化打下基础,并提出了业务过程到系统过程建模的推导原则和具体执行条件,能够解决目前用例和活动图编制无章可循的局面或编制的用例和活动图之间关联割裂、不具备推导或关联关系的状况。

    一种基于场景的需求建模系统及方法、信息数据处理终端

    公开(公告)号:CN109491642A

    公开(公告)日:2019-03-19

    申请号:CN201811293015.6

    申请日:2018-11-01

    IPC分类号: G06F8/10 G06F8/20

    摘要: 本发明属于用于执行专门程序的装置技术领域,公开了一种基于场景的需求建模系统及方法、信息数据处理终端,包括:需求准备模块、业务建模模块、系统建模模块;本发明实现了业务单据和报表转换为业务实体的过程,业务实体通过分析形成具有关联关系的概念实体的一条推导线索;涉众分析按照业务场景到业务角色的推导转换,业务角色在计算机执行角度推导出系统用户的演化线路;从业务现状描述逐步过渡到计算机化描述的推导演化过程,步步有依据,有推导,有演进。

    一种基于自然语言处理的智能标注方法及装置

    公开(公告)号:CN109271630A

    公开(公告)日:2019-01-25

    申请号:CN201811058770.6

    申请日:2018-09-11

    IPC分类号: G06F17/27 G06N3/04 G06N3/08

    摘要: 本发明公开了一种基于自然语言处理的智能标注方法及装置,包括:训练标注模型;获取待标注数据,根据所述标注模型,对所述待标注数据进行自动标注;记录标注操作信息。通过本发明公开的自然语言处理的智能标注方法,能够解决现有技术中自然语言标注数据需要人工处理,标注数据速度慢,数据标注成本高的技术问题。

    一种基于(k,n)门限秘密分享的失效份额恢复方法

    公开(公告)号:CN105743639A

    公开(公告)日:2016-07-06

    申请号:CN201510324929.4

    申请日:2015-06-13

    IPC分类号: H04L9/08

    摘要: 本发明涉及一种基于(k,n)门限秘密分享的失效份额恢复方法。当第r个份额持有者Pr的份额f(r)失效时,选择k个有效份额的持有者p1,p2,…,pk,其有效份额分别为F(1),F(2),……,F(k);对每一个有效份额持有者pi,各自确定一个k?1阶多项式gi(x),计算出gi(1),gi(2),…,gi(k),并分发给对应的有效份额持有者p1,p2,…,pk;计算g1(i)+g2(i)+…+gk(i)+F(i)=h(i);将获得的数据集{h(i),1≤i≤k}进行拉格朗日插值多项式算法得到一个k?1阶多项式h(x);计算得出h(r)的值,即是丢失的份额。本发明所述方法在不大于n?k个份额失效后,可以在不暴露秘密的前提下得到恢复,增强了秘密分享系统的实用性。