数据迁移校正方法及系统
    11.
    发明公开

    公开(公告)号:CN107037978A

    公开(公告)日:2017-08-11

    申请号:CN201610930983.8

    申请日:2016-10-31

    IPC分类号: G06F3/06

    摘要: 本申请涉及数据迁移,特别涉及大型数据和特大型数据迁移和校正方法。本申请提供一种数据迁移校正的方法和系统,其中方法应用于具有控制器的系统中,控制器连接源数据服务器、目标数据服务器,包括步骤:源数据服务器存储有迁出文件,目标数据服务器具有未使用的存储空间,用于存放迁出文件,按源数据服务器的处理器核的个数的整数倍,将迁出文件划分为多个数据块,源数据服务器计算,获得每个数据块分别对应的数字摘要A;将数据摘要A保存于控制器中;并将迁出文件发送至目标数据服务器;在目标数据服务器中,在迁出文件转移的过程中平行计算经过数据迁移后的迁出文件中的数据块的数据摘要B;比较数据摘要A和数据摘要B是否相同;本申请用于解决大数据迁移时完整性校验的问题,其可靠性高、速度快。

    一种通用机器学习数据分析平台

    公开(公告)号:CN106779087A

    公开(公告)日:2017-05-31

    申请号:CN201611075837.8

    申请日:2016-11-30

    IPC分类号: G06N99/00

    CPC分类号: G06N99/005

    摘要: 本发明提供一种通用机器学习数据分析平台,包括界面模块、数据存储模块、预处理模块、特征提取模块、特征转换模块、算法模块以及选择优化模块;所述特征提取模块根据用户设定的特征参数从所述待分析数据中提取所述特征参数;所述特征转换模块用于将用户设定的特征转换成用户所需的表示形式;所述算法模块包含多种算法模型供用户选择以及供用户构建模型,用户构建至少一组模型;所述选择优化模块从构建好的模型中选出最优的模型和最优的参数,然后保存所述最优的模型;上述各模块产生的数据均存储于所述数据存储模块中。本发明用户可以自由组合使用各个模块与算法模型,还可以建立复合模型,快速迭代开发出新型分析模型,大大提高工作效率。

    一种基于多目标跟踪的作业现场安全监管方法

    公开(公告)号:CN116229353A

    公开(公告)日:2023-06-06

    申请号:CN202310021046.0

    申请日:2023-01-06

    摘要: 本发明涉及一种基于多目标跟踪的作业现场安全监管方法,包括以下步骤:在服务器端搭建FairMOT模型的训练环境,收集若干作业现场监控视频数据在服务器端对FairMOT模型进行训练,并将训练好的模型转化为预设的边缘环境能运行的模型文件;在边缘端搭建FairMOT模型的推理环境,并将服务器端转化好的模型文件导出至边缘端;在边缘端从目标作业现场的多个监控摄像头接收多路监控视频,通过模型文件对多路监控视频进行并行分析处理,识别各路监控视频中的目标,并对识别到的所有目标进行关联统一,对识别到的每一目标进行位置跟踪;基于识别到的每一目标的位置跟踪结果,根据预先制定的安全监管规则完成作业现场监管任务。

    多入口数据缓存方法及存储介质

    公开(公告)号:CN111090675A

    公开(公告)日:2020-05-01

    申请号:CN201911154529.8

    申请日:2019-11-22

    IPC分类号: G06F16/2455 G06F16/2453

    摘要: 一种多入口数据缓存方法及存储介质,其中方法包括如下步骤,拦截原缓存调用请求,根据该缓存调用请求生成密钥KEY,所述密钥KEY的生成规则为:入口平台代码+命名空间+类名+命名空间版本号+识别码;使用上述密钥在缓存服务器中进行数据调用,若获取的到数据,则将数据返回,若未命中数据,则直接使用原缓存调用请求获取数据库中数据,并将该数据及对应的密钥KEY存储在缓存服务器中。本发明通过对数据调用的请求进行拦截,然后在缓存服务器中创建识别KEY及对应数据的方式,使得多入口分次调用相同数据的请求不用再多次访问数据库,减少了数据库的代码侵入,并进一步地提高了入口数据调用的效率。