一种基于多智能体强化学习的网内服务功能部署方法

    公开(公告)号:CN112769594A

    公开(公告)日:2021-05-07

    申请号:CN202011470782.7

    申请日:2020-12-14

    摘要: 本发明公开了一种基于多智能体强化学习的网内服务功能部署方法,包括以下步骤:S1、每个参与者分别更新策略π的参数;S2、每个评论家分别更新动作Q值参数;S3、定义θ={θ1,θ2,....θN}为N个agent(actor)的参数,相应的π={π1,π2,....πN}分别表示其策略;S4、对于在SFC部署过程中的用户,将第i个agent的累计预期奖励的策略梯度定义;S5、每个agent的Qi是相互独立进行训练学习的,其更新方法可以表示为:S6、定义来表示第i个agent的策略对第j个agent策略的函数近似,它的近似代价是一个带有熵正则化器的对数代价函数。本发明能够综合分布式和集中式方法的优点,既能够快速反应用户需求,保护用户隐私,提高用户服务体验。又能够考虑服务提供商运营成本,促使网络负载均衡,提高网络资源利用率。

    基于强化学习的数据中心网络节能方法及系统

    公开(公告)号:CN117240636A

    公开(公告)日:2023-12-15

    申请号:CN202211423259.8

    申请日:2022-11-15

    IPC分类号: H04L12/12 H04L41/12

    摘要: 本申请提供一种基于强化学习的数据中心网络节能方法及系统,方法包括:将数据中心网络当前时刻的网络状态数据发送至智能体,以使智能体对网络状态数据进行复杂度降低处理,并基于深度强化学习算法,应用经复杂度降低处理后的网络状态数据和深度神经网络生成数据中心网络的下一时刻针对一目标链路的节能动作决策数据;接收节能动作决策数据并对目标链路进行开启或关闭处理,更新网络拓扑以使该控制器根据更新后的网络拓扑对应更新数据中心网络。本申请能够在保证数据中心拓扑整体结构的稳定性的基础上,有效降低数据中心耗电量,实现数据中心网络节能控制,并能够有效降低节能过程中算法复杂度,进而能够有效提高节能决策的生成效率。

    算力网络任务调度引擎方法及装置

    公开(公告)号:CN115794335A

    公开(公告)日:2023-03-14

    申请号:CN202211418432.5

    申请日:2022-11-14

    IPC分类号: G06F9/48 G06F8/60

    摘要: 本发明提供一种算力网络任务调度引擎方法及装置,该方法包括:获取待部署微服务、部署算法、待部署微服务需求以及各集群信息,基于待部署微服务需求以及各集群信息筛选与待部署微服务匹配的第一集群集合;基于第一集群集合和部署算法确定部署策略,部署策略包括副本的数量以及部署集群的名称,部署集群属于第一集群集合,基于部署策略对待部署微服务进行部署;获取待调度任务、调度算法以及待调度任务需求,基于待调度任务需求从部署集群集合中筛选第二集群集合;基于第二集群集合和调度算法确定调度策略,调度策略包括调度集群的名称和各调度集群对应的任务请求数量,调度集群属于第二集群集合,基于调度策略对待调度任务请求进行调度。

    流量大小估算方法和装置

    公开(公告)号:CN112235152B

    公开(公告)日:2022-05-10

    申请号:CN202010921993.1

    申请日:2020-09-04

    摘要: 本申请公开了一种流量大小估算方法和装置,其中,方法包括:获取多个历史流序列的特征属性,并对多个历史流序列进行预处理;根据多个历史流序列的特征属性和预处理结果,计算多个历史流序列之间的相似度;根据多个历史流序列之间的相似度对多个历史流序列进行聚类,以获得多个历史流序列聚类簇;根据多个历史流序列聚类簇,创建多个流大小估算模型;结合多个历史流序列聚类簇以及新流序列的相似度,分配流大小估算模型,以对新流序列进行流量大小估算,该方法基于历史流的相似性对其进行聚类,并且针对每个聚类簇结合新流序列的相似度,为新流序列分配流大小估算模型用于流量大小估算,提高了流量大小估算的准确性,并且可大规模部署。

    一种基于标签的分布式轻量级全网遥测方法及装置

    公开(公告)号:CN113225229B

    公开(公告)日:2022-04-05

    申请号:CN202110500776.X

    申请日:2021-05-08

    IPC分类号: H04L43/12

    摘要: 本发明实施例提供了一种基于标签的分布式轻量级全网遥测方法及装置,涉及网络测量技术领域,上述方法包括:接收待转发数据包;通过解析待转发数据包,确定用于转发待转发数据包的转发端口以及下一跳设备;若当前时间与第一时间的差值大于时差阈值,则将网络设备的设备状态以标签形式写入待转发数据包,并将第一时间更新为当前时间;判断下一跳设备是否为待转发数据包的目的设备;若为是,则对待转发数据包进行拆分,获得第一数据包和第二数据包,向控制器转发第一数据包,向目的设备转发第二数据包;若为否,则通过转发端口转发写入设备状态后的待转发数据包。应用本发明实施例提供的方案进行全网遥测,能够提高进行全网遥测的稳定性。

    一种低时延零抖动的混合时间敏感流量调度方法及装置

    公开(公告)号:CN113612700A

    公开(公告)日:2021-11-05

    申请号:CN202110924851.5

    申请日:2021-08-12

    IPC分类号: H04L12/851

    摘要: 本发明提出一种低时延零抖动的混合时间敏感流量调度方法及装置,方法是由新颖的无等待整形器和循环排队整形器组成,通过严格限制流在每个输出端口和每个周期上的传输时间不重叠,无等待整形器可以实现以零抖动传输同步流。本申请提出的方法可以解决以下技术问题:提出无等待整形器,以消除2T大小的传输抖动,实现零抖动传输等时流量;提出基于循环排队转发机制的循环排队整形器,实现低时延的传输周期流量;提出时间感知循环排队机制,融合无等待整形器和循环排队整形器,从而实现周期流和等时流的共网传输。

    一种面向卫星网络的网络功能服务链部署方法

    公开(公告)号:CN113014302A

    公开(公告)日:2021-06-22

    申请号:CN202110129507.7

    申请日:2021-01-29

    IPC分类号: H04B7/185 H04L12/24

    摘要: 本发明实施例提供的一种面向卫星网络的网络功能服务链部署方法,应用于卫星技术领域,获取卫星网络当前的网络状态信息;利用预先建立的基于进化图的卫星网络拓扑模型,根据网络状态信息生成卫星网络的进化图,其中,卫星网络的进化图表示卫星网络拓扑子图与时间的变化关系;根据进化图,计算得到卫星网络的多种部署策略;获取并根据服务链的部署信息,利用预先建立的网络功能服务链放置模型计算各部署策略的部署成本;选取部署成本最低的部署策略为目标部署策略。可以在卫星链路发生变化时,计算部署成本最低的卫星网络部署策略,从而对卫星网络进行快速部署,避免服务质量的下降。

    一种基于网内计算平台的物联网设备计算卸载架构

    公开(公告)号:CN112671852A

    公开(公告)日:2021-04-16

    申请号:CN202011470288.0

    申请日:2020-12-14

    IPC分类号: H04L29/08 H04L29/06

    摘要: 本发明公开了一种基于网内计算平台的物联网设备计算卸载架构。本发明包括INPIE Service Cluster、ME Cluster、Remote Cloud,所述INPIE Service Cluster作为提供网内计算卸载服务的主体,所述ME Cluster为MEC计算卸载服务提供主体,所述Remote Cloud为云计算卸载服务提供主体,当前的可编程数据平面设备先天具有低时延,高吞吐的性能优势,可以流水线式地并行处理数据报文,因此会拥有比传统的服务器(主机)计算卸载架构更低的业务响应时延,由于改进后物联网设备计算使可编程数据平面设备辅助物联网设备更好的进行计算卸载,同时能与MEC和云计算框架融合,所以产生了提高业务的时延,吞吐量性能,提高实时业务的保障能力的效果。

    一种命名数据网络的缓存放置决策信息的确定方法及装置

    公开(公告)号:CN111935301A

    公开(公告)日:2020-11-13

    申请号:CN202010840965.7

    申请日:2020-08-20

    IPC分类号: H04L29/08

    摘要: 本发明实施例提供了一种命名数据网络的缓存放置决策信息的确定方法及装置,方法包括:获取初始缓存放置决策信息、转发关系信息、内容信息的数据量及传输时长;针对每个内容信息确定目标转发路径;获取边缘节点接收请求的频率,并确定每个中间节点的第一频率;基于第一频率、初始缓存放置决策信息及响应时延确定每个中间节点的聚合概率;基于聚合概率及第一频率,确定每个中间节点的第二频率;根据源节点对应的网关的第二频率及该内容信息的数据量确定跨域流量;计算跨域流量的总合,并根据启发式算法对初始缓存放置决策信息进行调整,确定总合最小时的目标缓存放置决策信息。应用本发明实施例,可以提高确定目标缓存放置决策信息的准确度。

    一种天地一体化卫星通信网络仿真系统及方法

    公开(公告)号:CN109413682B

    公开(公告)日:2020-07-03

    申请号:CN201811478922.8

    申请日:2018-12-05

    IPC分类号: H04W24/06 H04B7/185

    摘要: 本发明实施例提供了一种天地一体化卫星通信网络仿真系统及方法,该方法应用于天地一体化卫星通信网络仿真系统中的拓扑管理模块,包括:初始化LEO卫星通信网络的拓扑结构;根据预先设定的更新LEO卫星通信网络的拓扑结构的时间间隔,定时更新LEO卫星通信网络的拓扑结构;根据预先设定的仿真时间区间,判断是否需要结束LEO卫星通信网络的仿真,如果否,返回所述定时更新LEO卫星通信网络的拓扑结构的步骤;如果是,结束仿真。本发明实施例通过定时更新LEO卫星通信网络的拓扑结构,实现了百万级用户节点的LEO卫星通信网络仿真,解决了天地一体化卫星通信网络中百万级大规模用户的移动性管理问题。