-
公开(公告)号:CN111966513B
公开(公告)日:2024-08-09
申请号:CN202010895515.8
申请日:2020-08-31
IPC分类号: G06F9/54
摘要: 本发明公开了一种无先验知识Coflow的多级队列调度方法、装置及其调度设备,该方法为:在执行产生Coflow的作业时,选择已经包含执行该作业所需的数据的主机节点和/或网络负载最小的主机节点作为计算节点;在按照多级队列的优先级顺序对Coflow中的流量进行调度时,若主机节点的发送端口产生闲置空间,优先采用闲置空间进行流量调度。本发明基于节点的状态信息为Coflow的流量进行合理放置,并优化主机节点的发送端口在多级队列调度过程中产生的闲置空间,降低整体的Coflow完成时间,提高数据中心的性能。
-
公开(公告)号:CN111966513A
公开(公告)日:2020-11-20
申请号:CN202010895515.8
申请日:2020-08-31
IPC分类号: G06F9/54
摘要: 本发明公开了一种无先验知识Coflow的多级队列调度方法、装置及其调度设备,该方法为:在执行产生Coflow的作业时,选择已经包含执行该作业所需的数据的主机节点和/或网络负载最小的主机节点作为计算节点;在按照多级队列的优先级顺序对Coflow中的流量进行调度时,若主机节点的发送端口产生闲置空间,优先采用闲置空间进行流量调度。本发明基于节点的状态信息为Coflow的流量进行合理放置,并优化主机节点的发送端口在多级队列调度过程中产生的闲置空间,降低整体的Coflow完成时间,提高数据中心的性能。
-
公开(公告)号:CN110888849B
公开(公告)日:2022-07-22
申请号:CN201911077285.8
申请日:2019-11-06
IPC分类号: G06F16/17 , G06F16/18 , G06F16/903
摘要: 本发明提供了一种在线日志解析方法、系统及其电子终端设备,该方法包含以下步骤:S1、对每一条未解析日志进行日志预处理,得到多条不同日志长度未解析日志序列,将其归到对应的第一日志组中;S2、获取第一日志组中各日志序列的日志字符串,计算日志字符串相似度,基于日志字符串相似度在线聚类;S3、将未解析日志序列作为查询项与第二日志组的模板生成树中的模板匹配共同的节点,获取模板。其优点是:将日志按照长度进行分类,基于日志字符串相似度对日志进行二次聚类,最后使用模板生成树提取日志模板,该方法能够高效而准确地从非结构化日志中提取日志模板,方便数据分析师对日志进行更高级的分析和处理。
-
公开(公告)号:CN111835361B
公开(公告)日:2024-04-30
申请号:CN202010689825.4
申请日:2020-07-17
IPC分类号: H03M7/30
摘要: 本发明公开了一种数据相似性检测方法、装置、电子设备和存储介质,所述方法包括:将原始数据划分为若干个具有预设级别的数据块;将每一所述数据块划分为若干个子数据块;对每一所述子数据块进行特征提取,以获取每一所述子数据块对应的局部特征;将每一所述数据块的所有所述局部特征划分为若干组;构建每一组的超级特征;对所有所述超级特征进行对比,以得到所有所述数据块间的相似性检测结果。本发明有效地降低了数据块局部特征提取的计算开销和时间开销,极大地提高了数据相似性检测的效率和精确度,进而提高了数据增量压缩的效率。
-
公开(公告)号:CN110888849A
公开(公告)日:2020-03-17
申请号:CN201911077285.8
申请日:2019-11-06
IPC分类号: G06F16/17 , G06F16/18 , G06F16/903
摘要: 本发明提供了一种在线日志解析方法、系统及其电子终端设备,该方法包含以下步骤:S1、对每一条未解析日志进行日志预处理,得到多条不同日志长度未解析日志序列,将其归到对应的第一日志组中;S2、获取第一日志组中各日志序列的日志字符串,计算日志字符串相似度,基于日志字符串相似度在线聚类;S3、将未解析日志序列作为查询项与第二日志组的模板生成树中的模板匹配共同的节点,获取模板。其优点是:将日志按照长度进行分类,基于日志字符串相似度对日志进行二次聚类,最后使用模板生成树提取日志模板,该方法能够高效而准确地从非结构化日志中提取日志模板,方便数据分析师对日志进行更高级的分析和处理。
-
公开(公告)号:CN110943974A
公开(公告)日:2020-03-31
申请号:CN201911076577.X
申请日:2019-11-06
摘要: 一种DDoS异常检测方法及云平台主机,根据CPU利用率和网络流量数据,采用基于窗口的时间序列分析方法和单类分类检测方法进行异常检测。本发明可以实现更高的准确率和较低的误报率,同时也能记录攻击的过程,有利于人工的进一步分析并且将攻击后的行为与正常工作下的负载高峰进行区分。
-
公开(公告)号:CN110943974B
公开(公告)日:2022-08-02
申请号:CN201911076577.X
申请日:2019-11-06
摘要: 一种DDoS异常检测方法及云平台主机,根据CPU利用率和网络流量数据,采用基于窗口的时间序列分析方法和单类分类检测方法进行异常检测。本发明可以实现更高的准确率和较低的误报率,同时也能记录攻击的过程,有利于人工的进一步分析并且将攻击后的行为与正常工作下的负载高峰进行区分。
-
公开(公告)号:CN111835361A
公开(公告)日:2020-10-27
申请号:CN202010689825.4
申请日:2020-07-17
IPC分类号: H03M7/30
摘要: 本发明公开了一种数据相似性检测方法、装置、电子设备和存储介质,所述方法包括:将原始数据划分为若干个具有预设级别的数据块;将每一所述数据块划分为若干个子数据块;对每一所述子数据块进行特征提取,以获取每一所述子数据块对应的局部特征;将每一所述数据块的所有所述局部特征划分为若干组;构建每一组的超级特征;对所有所述超级特征进行对比,以得到所有所述数据块间的相似性检测结果。本发明有效地降低了数据块局部特征提取的计算开销和时间开销,极大地提高了数据相似性检测的效率和精确度,进而提高了数据增量压缩的效率。
-
公开(公告)号:CN113704201A
公开(公告)日:2021-11-26
申请号:CN202111027875.7
申请日:2021-09-02
申请人: 国家电网有限公司信息通信分公司 , 南京航空航天大学 , 国网浙江省电力有限公司信息通信分公司 , 国网安徽省电力有限公司信息通信分公司 , 国家电网有限公司
摘要: 本发明提供一种日志异常检测方法、装置及服务器,应用于计算机技术领域,该方法获取的日志文件中包括N条按时序生成的日志,且前N‑1条日志作为参考日志,第N条日志作为目标日志,分别提取各日志实际的日志模板和日志参数值,根据各参考日志实际的日志模板对目标日志的日志模板进行预测,得到模板预测结果,根据各参考日志实际的日志参数值对目标日志的日志参数值进行预测,得到参数预测结果,如果模板预测结果与目标日志实际的日志模板不满足第一判定条件,或参数预测结果与目标日志实际的日志参数值不满足第二判定条件,则判定目标日志异常,本方法通过日志模板和日志参数两方面对日志进行异常检测,检测更加全面。
-
公开(公告)号:CN111986085A
公开(公告)日:2020-11-24
申请号:CN202010765385.6
申请日:2020-07-31
申请人: 南京航空航天大学
摘要: 本发明公开了一种基于深度反馈注意力网络系统的图像超分辨率方法,包括输入模块、特征提取模块、反馈模块、重构模块及输出模块。本发明提出的网络系统在每一轮训练中,以迭代的方式学习图像低分辨率到高分辨率的映射,并在迭代的过程中结合反馈注意力机制提高模型学习的准确性,从而进一步提升超分辨率结果的质量。本发明提出的网络系统模型在单图像超分辨率基准测试集Set5的´2/´3/´4倍率重建任务上,最高分别达到了38.04/34.65/32.41db的峰值信噪比。
-
-
-
-
-
-
-
-
-