一种数据的风险预警方法、装置、设备和存储介质

    公开(公告)号:CN117592063A

    公开(公告)日:2024-02-23

    申请号:CN202311345385.0

    申请日:2023-10-17

    摘要: 本申请提供一种数据的风险预警方法、装置、设备和存储介质,涉及数据处理技术领域。一种数据的风险预警方法,应用于大数据平台,包括:将所述大数据平台的预警规则表与后端应用的预警规则表同步;根据所述预警规则表,筛选所述大数据平台的初始数据,以获取第一风险数据;按预设时段输出所述第一风险数据,以与所述后端应用的第二风险数据进行匹配;根据所述第一风险数据和接收到的所述第一风险数据与所述第二风险数据的匹配结果,生成风险反馈信息。根据本申请的实施例,可灵活设置数据的风险预警条件,并实现大数据平台与应用数据的同步。

    分布式调度方法及装置、电子设备以及计算机存储介质

    公开(公告)号:CN110245023A

    公开(公告)日:2019-09-17

    申请号:CN201910564952.9

    申请日:2019-06-27

    IPC分类号: G06F9/50

    摘要: 提供分布式调度方法及装置、电子设备以及计算机存储介质,其中,分布式调度方法用于对大数据平台中的任务进行调度,所述分布式调度方法包括如下步骤:步骤S1,确定需要调度的计算任务的范围,生成初始任务集合;步骤S2,将所有初始任务集合中的任务的上游引用对象的任务进行层层统计,并按上下游顺序进行排列;步骤S3,对每个任务的内存和处理器开销进行估算,通过资源开销评估算法计算各自分值,并按照分值进行排序以生成执行任务集合;步骤S4,将所述执行任务集合中的所述任务,分配到所述大数据平台的多个计算节点以由多个所述计算节点执行各自的任务。根据本发明的分布式调度方法,进行分配控制和开销测算,解决了资源浪费情况。

    一种基于批流融合的挂货量统计方法、系统、装置

    公开(公告)号:CN112150248B

    公开(公告)日:2021-08-03

    申请号:CN202011062937.3

    申请日:2020-09-30

    摘要: 本发明涉及一种基于批流融合的挂货量统计方法、系统、装置,方法包括步骤:S1、批处理:平台开市前基于业务库中的资源表获取并计算处于上架状态的各个资源的资源挂货唯一哈希码和资源重量并写入消息系统,求取各个供应商的挂货量初始值存入数据库;S2、流处理:平台开市后实时采集资源表履历,筛选上架操作的记录生成新的资源挂货唯一哈希码以及对应的资源重量实时值;S3、批流融合处理:判断新的资源挂货唯一哈希码是否存在于消息系统中,若是则舍弃,否则将其存入消息系统,同时更新各个供应商的总挂货量并存入数据库;S4、循环执行步骤S2~S3。与现有技术相比,本发明保证了数据传输和挂货量计算的及时性。

    分布式调度方法及装置、电子设备以及计算机存储介质

    公开(公告)号:CN110245023B

    公开(公告)日:2020-09-25

    申请号:CN201910564952.9

    申请日:2019-06-27

    IPC分类号: G06F9/50

    摘要: 提供分布式调度方法及装置、电子设备以及计算机存储介质,其中,分布式调度方法用于对大数据平台中的任务进行调度,所述分布式调度方法包括如下步骤:步骤S1,确定需要调度的计算任务的范围,生成初始任务集合;步骤S2,将所有初始任务集合中的任务的上游引用对象的任务进行层层统计,并按上下游顺序进行排列;步骤S3,对每个任务的内存和处理器开销进行估算,通过资源开销评估算法计算各自分值,并按照分值进行排序以生成执行任务集合;步骤S4,将所述执行任务集合中的所述任务,分配到所述大数据平台的多个计算节点以由多个所述计算节点执行各自的任务。根据本发明的分布式调度方法,进行分配控制和开销测算,解决了资源浪费情况。

    钢厂期货交易方法及系统

    公开(公告)号:CN110288482A

    公开(公告)日:2019-09-27

    申请号:CN201910588128.7

    申请日:2019-07-02

    IPC分类号: G06Q40/04 G06Q30/02

    摘要: 本发明涉及一种钢厂期货交易方法和交易系统,属于互联网技术领域。采用了该发明的钢厂期货交易方法和交易系统,可利用网络获取与调价相关的关联指标的历史数据;进而建立钢厂期货调价预测模型;确定调价后的期货价格;并根据该期货价格进行期货交易,从而保证价格预判方式依赖网络完成,因而对于技术人员的专业知识和经验积累的要求更低,便于操作,且调价方式更为客观,更利于基于互联网的期货交易的形成。且本发明的实现方式简便,应用范围也相当广泛。

    钢厂期货交易方法及系统

    公开(公告)号:CN110288482B

    公开(公告)日:2021-03-30

    申请号:CN201910588128.7

    申请日:2019-07-02

    IPC分类号: G06Q40/04 G06Q30/02

    摘要: 本发明涉及一种钢厂期货交易方法和交易系统,属于互联网技术领域。采用了该发明的钢厂期货交易方法和交易系统,可利用网络获取与调价相关的关联指标的历史数据;进而建立钢厂期货调价预测模型;确定调价后的期货价格;并根据该期货价格进行期货交易,从而保证价格预判方式依赖网络完成,因而对于技术人员的专业知识和经验积累的要求更低,便于操作,且调价方式更为客观,更利于基于互联网的期货交易的形成。且本发明的实现方式简便,应用范围也相当广泛。

    基于ER关系的分布式调度方法及装置、设备以及存储介质

    公开(公告)号:CN110825526B

    公开(公告)日:2020-10-30

    申请号:CN201911088140.8

    申请日:2019-11-08

    摘要: 提供一种基于ER关系的分布式调度方法及装置、电子设备以及计算机存储介质,其中,基于ER关系的分布式调度方法用于对大数据平台中的任务进行调度,所述分布式调度方法包括如下步骤:步骤S1,确定需要调度的计算任务的范围,生成初始任务集合;步骤S2,将所有初始任务集合中的任务基于ER关系进行分层排列;步骤S3,对每个任务的内存和处理器开销进行估算,通过资源开销评估算法计算各自分值,并按照分值进行排序以生成执行任务集合;步骤S4,将所述执行任务集合中的所述任务,分配到所述大数据平台的多个计算节点以由多个所述计算节点执行各自的任务。根据本发明的分布式调度方法,进行分配控制和开销测算,解决了资源浪费情况。

    一种针对B2B平台用户的会员流失预警方法和系统

    公开(公告)号:CN115511525A

    公开(公告)日:2022-12-23

    申请号:CN202211181162.0

    申请日:2022-09-27

    摘要: 本发明涉及一种针对B2B平台用户的会员流失预警方法和系统,包括接收B2B平台的原始数据并进行数据清洗和预处理;在原始数据中对部分数据进行流失用户和非流失用户的标注,得到训练样本;并通过非监督机器学习模型进行自动化数据标注,扩充训练样本;根据原始数据构建特征,采用保留数据原始属性的特征筛选方法,从业务完整度和数据质量层面进行特征筛选;基于召回率评价指标从多个经典机器学习方法中进行模型筛选;根据筛选出的特征和模型,基于训练样本进行模型迭代优化;根据训练好的模型进行流失概率计算,根据计算出的流失概率发出预警提示。与现有技术相比,本发明具有可以实现会员流失概率的精准量化,数据处理效率高、预测结果准确等优点。