-
公开(公告)号:CN115589608B
公开(公告)日:2023-03-07
申请号:CN202211545236.4
申请日:2022-12-05
Applicant: 合肥工业大学
Abstract: 本发明涉及数据检测技术领域,尤其涉及一种物联网数据异常检测模型训练方法、异常检测方法和系统,解决了现有各类技术在物联网异常数据检测时,存在的对高维数据存在检测效果不理想、增加数据处理负担、无法实现实时检测的问题。本发明提出的一种物联网数据异常检测模型训练方法,额外增加了一个用以保证循环一致性的第二识别网络,并采用近似梯度的方法迭代异常数据,以逐步排除异常成分。本发明在异常检测阶段,同时考虑重构误差与识别误差,并设计了用于评估数据异常程度的评价值计算函数,本发明训练的异常检测模型具有更好的F1得分,展现模型在精确度和召回率上显著超越了现有技术。
-
公开(公告)号:CN118101497B
公开(公告)日:2024-07-02
申请号:CN202410491172.7
申请日:2024-04-23
Applicant: 合肥工业大学
IPC: H04L41/147 , H04L41/16 , H04L43/0876 , H04L45/02 , G06N3/0455 , G06N3/048 , G06N3/084
Abstract: 本发明涉及网络工程和人工智能技术领域,尤其是一种基于生成流模型的网络流量矩阵估计模型、方法及系统。流量矩阵估计模型包括嵌入模块和基于流的生成模块,嵌入模块包括编码器和解码器。本发明提出的基于生成流模型的网络流量矩阵估计模型的训练方法,在训练流量矩阵估计模型时,考虑到了丢失信息,基于流量矩阵到链路负载和丢失信息的映射关系,训练嵌入模块和生成模块;从而可以在不了解路由矩阵的情况下,无偏地学习从流量矩阵到链路负载的可逆变换,使得训练完成的流量矩阵估计模型,可通过逆运算,结合随机抽样的丢失信息和链路负载高精度预测流量矩阵。
-
公开(公告)号:CN118035926A
公开(公告)日:2024-05-14
申请号:CN202410432016.3
申请日:2024-04-11
Applicant: 合肥工业大学
IPC: G06F18/2433 , G06F18/214 , G06N3/088 , G06F123/02
Abstract: 本发明涉及在线监控和数据检测技术领域,尤其是一种基于多元数据扩散的模型训练、水检测方法及系统。本发明提出的基于多元数据扩散的模型训练方法,本质是为了训练多元时间序列无监督异常检测模型。本发明对标准扩散模型进行了改进,该模型不是直接由输入数据和重构数据得出异常分数,而是将扩散步长应用到异常分数的表示上,而是将扩散步长应用到异常分数的表示上,以增强对MTS时间依赖性的学习。本发明训练的异常检测模型在检测精度方面优于当前最先进的所有基准,具有更好的F1得分,最终训练的异常检测模型在鲁棒性上显著超越了现有水平。
-
公开(公告)号:CN116319378A
公开(公告)日:2023-06-23
申请号:CN202310545574.6
申请日:2023-05-16
Applicant: 合肥工业大学
IPC: H04L41/14 , G06N3/084 , G06N3/0455 , H04L41/16
Abstract: 本发明涉及网络工程和人工智能技术领域,尤其是一种基于深度学习的网络流量矩阵估计、模型训练方法和系统。本发明针对包含映射模块和重构模块的基础模型进行训练,提取训练完成的映射模块作为网络流量矩阵估计模型。映射模块结合链路负载计算流量矩阵,重构模块结合流量矩阵重构链路负载估计值。本发明能够在数据集不完整的情况下,利用双损失机制保证基础模型对现实TM估计的准确性、鲁棒性与实时性,本发明解决了实际生活中大量存在的训练数据集缺失导致的模型欠收敛问题。
-
公开(公告)号:CN115589608A
公开(公告)日:2023-01-10
申请号:CN202211545236.4
申请日:2022-12-05
Applicant: 合肥工业大学
Abstract: 本发明涉及数据检测技术领域,尤其涉及一种物联网数据异常检测模型训练方法、异常检测方法和系统,解决了现有各类技术在物联网异常数据检测时,存在的对高维数据存在检测效果不理想、增加数据处理负担、无法实现实时检测的问题。本发明提出的一种物联网数据异常检测模型训练方法,额外增加了一个用以保证循环一致性的第二识别网络,并采用近似梯度的方法迭代异常数据,以逐步排除异常成分。本发明在异常检测阶段,同时考虑重构误差与识别误差,并设计了用于评估数据异常程度的评价值计算函数,本发明训练的异常检测模型具有更好的F1得分,展现模型在精确度和召回率上显著超越了现有技术。
-
公开(公告)号:CN118555215B
公开(公告)日:2024-10-01
申请号:CN202411018540.2
申请日:2024-07-29
Applicant: 合肥工业大学
Abstract: 为了克服上述现有技术中扩散模型无法应用于求解存在大量缺失的网络流量矩阵填充问题的缺陷,本发明提出了一种基于扩散模型的缺失网络流量矩阵填充方法,在填充缺失网络流量矩阵时,通过计算梯度矫正含噪流量矩阵的条件分布,解决了结合扩散模型的生成过程实现网络流量矩阵填充的问题,并通过替换已知部分含噪流量再次更新含噪流量矩阵已知部分的边缘分布。本发明全面考虑了在无法获得完整网络流量矩阵数据集的场景下,结合扩散模型实现网络流量矩阵填充,可以有效解决现有方法存在填充假设强、且填充后生成源点对质量较差等诸多问题。
-
公开(公告)号:CN118555215A
公开(公告)日:2024-08-27
申请号:CN202411018540.2
申请日:2024-07-29
Applicant: 合肥工业大学
Abstract: 为了克服上述现有技术中扩散模型无法应用于求解存在大量缺失的网络流量矩阵填充问题的缺陷,本发明提出了一种基于扩散模型的缺失网络流量矩阵填充方法,在填充缺失网络流量矩阵时,通过计算梯度矫正含噪流量矩阵的条件分布,解决了结合扩散模型的生成过程实现网络流量矩阵填充的问题,并通过替换已知部分含噪流量再次更新含噪流量矩阵已知部分的边缘分布。本发明全面考虑了在无法获得完整网络流量矩阵数据集的场景下,结合扩散模型实现网络流量矩阵填充,可以有效解决现有方法存在填充假设强、且填充后生成源点对质量较差等诸多问题。
-
公开(公告)号:CN119232604B
公开(公告)日:2025-03-14
申请号:CN202411748040.4
申请日:2024-12-02
Applicant: 合肥工业大学
IPC: H04L41/16 , H04L41/14 , H04L41/142
Abstract: 本发明属于网络工程和人工智能技术领域,尤其是基于扩散模型的网络流量序列估计方法、系统和存储介质。本发明提出的一种基于扩散模型的网络流量序列估计方法,获取待估计网络的路由矩阵A以及目标时间点上的链路负载序列y,从标准高斯噪声中随机取样获得初始流量序列xT;结合扩散步数t对流量序列xt进行逆向扩散,得到流量序列xt‑1并进行梯度更新;循环迭代,直至获取x1,去噪网络对进行降噪处理并输出源点流量估计序列x'0。本发明可在源点流量缺失的情况下,实现高精度的网络流量矩阵估计。
-
公开(公告)号:CN118035926B
公开(公告)日:2024-06-18
申请号:CN202410432016.3
申请日:2024-04-11
Applicant: 合肥工业大学
IPC: G06F18/2433 , G06F18/214 , G06N3/088 , G06F123/02
Abstract: 本发明涉及在线监控和数据检测技术领域,尤其是一种基于多元数据扩散的模型训练、水检测方法及系统。本发明提出的基于多元数据扩散的模型训练方法,本质是为了训练多元时间序列无监督异常检测模型。本发明对标准扩散模型进行了改进,该模型不是直接由输入数据和重构数据得出异常分数,而是将扩散步长应用到异常分数的表示上,而是将扩散步长应用到异常分数的表示上,以增强对MTS时间依赖性的学习。本发明训练的异常检测模型在检测精度方面优于当前最先进的所有基准,具有更好的F1得分,最终训练的异常检测模型在鲁棒性上显著超越了现有水平。
-
公开(公告)号:CN116304604B
公开(公告)日:2023-08-18
申请号:CN202310531272.3
申请日:2023-05-12
Applicant: 合肥工业大学
IPC: G06F18/21 , G06F18/24 , G06F18/214 , G06N3/0475 , G06N3/088
Abstract: 本发明涉及数据检测技术领域,尤其涉及一种多变量时间序列数据异常检测、模型训练方法和系统,解决了现有各类技术在多变量时间序列异常数据检测时,存在的受噪声影响大、检测效果不理想、无法实现实时检测的问题。本发明提出的一种多变量时间序列数据异常检测模型训练方法,额外增加了用以消除噪声影响的自适应权重和过滤模块,并采用对比学习的方法学习数据特征,以提升模型的泛化能力。本发明在异常检测阶段,着重考虑重构误差,并设计了用于评估数据异常程度的评价函数,本发明训练的异常检测模型具有更好的F1得分,展现模型在鲁棒性上显著超越了现有技术。
-
-
-
-
-
-
-
-
-