强化学习智能体训练方法、模态带宽资源调度方法及装置

    公开(公告)号:CN114866494B

    公开(公告)日:2022-09-20

    申请号:CN202210782477.4

    申请日:2022-07-05

    申请人: 之江实验室

    摘要: 本发明公开了强化学习智能体训练方法、模态带宽资源调度方法及装置,其中强化学习智能体训练方法在多模态网络下,利用强化学习智能体与网络环境不断交互,获取最新全局网络特征并输出更新后的动作。通过调节模态所占用的带宽,设定奖励值为智能体确定优化目标,实现模态的调度,保障多模态网络资源合理使用。训练后的强化学习智能体应用于模态带宽资源调度方法中,能自适应于不同特征的网络中,可用于多模态网络的智慧管控,具有良好的适应性及调度性能。

    一种可编程网元编译系统和编译方法

    公开(公告)号:CN114938322A

    公开(公告)日:2022-08-23

    申请号:CN202210869507.5

    申请日:2022-07-22

    申请人: 之江实验室

    IPC分类号: H04L41/00 H04L9/40 G06F8/41

    摘要: 本发明公开一种可编程网元编译系统和编译方法,系统针对网络模态对底层硬件资源的多样化需求,实现计算/存储/转发/安全一体化融合机制,将包括异质硬件资源和异构硬件资源的网元设备对外抽象为与底层硬件无关的逻辑网元;对异质硬件资源和异构硬件资源高级抽象封装,支持底层软硬件资源的灵活调用,使用对异质硬件资源和异构硬件资源间的功能等效置换技术,实现网络模态在硬件资源之间可根据实际需求相互切换、协同处理,并根据模态特征分配异构硬件资源,调用多种编译器,自动生成和优化模态数据包处理流水线。本发明提出的系统和方法为网络模态开发人员屏蔽了底层硬件差异化细节,降低了网络模态的编程复杂度,有利于网络模态的快速部署。

    强化学习智能体训练方法、模态带宽资源调度方法及装置

    公开(公告)号:CN114866494A

    公开(公告)日:2022-08-05

    申请号:CN202210782477.4

    申请日:2022-07-05

    申请人: 之江实验室

    摘要: 本发明公开了强化学习智能体训练方法、模态带宽资源调度方法及装置,其中强化学习智能体训练方法在多模态网络下,利用强化学习智能体与网络环境不断交互,获取最新全局网络特征并输出更新后的动作。通过调节模态所占用的带宽,设定奖励值为智能体确定优化目标,实现模态的调度,保障多模态网络资源合理使用。训练后的强化学习智能体应用于模态带宽资源调度方法中,能自适应于不同特征的网络中,可用于多模态网络的智慧管控,具有良好的适应性及调度性能。

    一种基于资源能力表述的网络编程逻辑功能与网络资源拟合匹配方法

    公开(公告)号:CN118519642B

    公开(公告)日:2024-09-27

    申请号:CN202410968709.4

    申请日:2024-07-19

    申请人: 之江实验室

    IPC分类号: G06F8/60 G06F8/41

    摘要: 本发明涉及一种基于资源能力表述的网络编程逻辑功能与网络资源拟合匹配方法,包括构建资源种类与能力的模型表述;解析数据面逻辑以确定出所需的资源种类与能力;进行资源拟合与能力匹配操作,输出得到拟合结果,用于将网络编程逻辑功能部署在网络资源中并运行。与现有技术相比,本发明通过构建资源种类与能力的模型表述,通过解析数据面逻辑,以提炼出数据面所需的资源种类与能力概述,再通过与对应的网络设备资源进行功能拟合匹配,能够实现数据面逻辑功能依据设备的资源能力进行部署,提高网络效率和资源利用率。

    一种基于网络编程语言的逻辑表示的转换方法和装置

    公开(公告)号:CN118426752A

    公开(公告)日:2024-08-02

    申请号:CN202410866695.5

    申请日:2024-07-01

    申请人: 之江实验室

    IPC分类号: G06F8/30 G06F8/41

    摘要: 本发明公开了一种基于网络编程语言的逻辑表示的转换方法和装置,方法包括以下步骤:对网络编程语言P4程序代码或其中间表示进行P4语法解析,得到网络编程语言逻辑结构以及多类别的网络编程逻辑资源;根据类别对网络编程逻辑资源进行编排得到网络编程逻辑资源管理库,对网络编程逻辑资源进行分类记录管理;基于网络编程语言逻辑结构对网络编程逻辑资源进行结构转换得到网络编程逻辑表示,以建模网络编程逻辑资源管理库中网络编程逻辑资源间的逻辑关联关系。本发明能够将基于通用的网络编程语言或者通用网络编程语言的中间表示转换为逻辑资源管理库及相应的逻辑表示,有助于快速开发IR映射到特定目标的后端的编译程序,提高工作效率。

    一种基于PINet的身份标识网络的存储感知路由方法

    公开(公告)号:CN115460136B

    公开(公告)日:2024-05-28

    申请号:CN202210938405.4

    申请日:2022-08-05

    摘要: 本发明公开一种基于PINet的身份标识网络的存储感知路由方法,该方法为:增加了一项路由节点对后继链路的感知决策,当身份标识网络路由器进行转发时,会对链路进行探测,根据探测结果判断是否对数据包进行存储操作,若判断下游链路质量较差时,主动选择将待传输内容存入存储空间;若下游链路质量较好,则选择直接继续向后传输。结合可靠逐跳传输机制,当向下一跳发送的数据内容发生丢包情况时,会继续从当前节点向后进行探测传输,经过这样的判断、存储/发送、断点重传之后,数据包的重传时间得到优化。本发明不仅可以有效降低链路故障率,还能在链路故障后,能够通过本发明所构建网络架构,使网络得以快速恢复通信能力。

    基于SDN控制器的NDN网络切片方法、装置、设备和介质

    公开(公告)号:CN117955908A

    公开(公告)日:2024-04-30

    申请号:CN202410357849.8

    申请日:2024-03-27

    申请人: 之江实验室

    摘要: 本申请涉及一种基于SDN控制器的NDN网络切片方法、装置、设备和介质,其中,计算所述NDN路由器的不同度量特性的切片路径,获得所述切片路径的转发表;将所述转发表下发至所述NDN路由器;基于NDN报文的度量特性,在所述NDN路由器上选择所述转发表中对应的切片路径将所述NDN报文进行路由转发。解决了NDN网络无法满足不同类型业务对网络性能的差异化需求的问题,实现了NDN网络中不同业务流量的隔离,从而满足不同通信传输业务特性的需求。

    面向分布式训练的协作式梯度网内聚合调度方法和装置

    公开(公告)号:CN117177377A

    公开(公告)日:2023-12-05

    申请号:CN202311208042.X

    申请日:2023-09-19

    申请人: 之江实验室

    IPC分类号: H04W72/543 G06N20/20

    摘要: 本发明公开了一种面向分布式训练的协作式梯度网内聚合调度方法和装置。其中,该方法,包括:根据收集到的网络资源信息和预定义的模型分区确定各worker节点上子模型对应的目标聚合节点;根据各worker节点上子模型对应的目标聚合节点,将各worker节点上划分得到的子模型训练后的梯度分片进标记;当梯度分片到达聚合节点时,将聚合节点的标识与梯度分片的标记进行比对,若不匹配则进行转发;若匹配,则将梯度分片分配到当前聚合节点特定的内存单元进行聚合;PS节点进行全局聚合,并将全局聚合后更新的参数发送至所有worker节点。本发明的技术方案,通过协作网内聚合执行梯度调度,实现了在可编程交换机上聚合异步到达的梯度并加速分布式训练。

    一种多模态网络控制信令防窃听方法、交换机及存储介质

    公开(公告)号:CN116800421B

    公开(公告)日:2023-11-07

    申请号:CN202311068637.X

    申请日:2023-08-24

    申请人: 之江实验室

    摘要: 本发明涉及一种多模态网络控制信令防窃听方法、交换机及存储介质,所述方法包括:在接收到的报文为信令报文时,读取移位密钥对所述信令报文执行移位加密转换,将转换后的信令报文附加前置头,形成packet_in报文发送;接收到SDN控制器反馈的packet_out报文,判断为加密信令报文时,采用所述移位密钥执行移位解密转换,获得解密报文,发送至指定主机终端,所述packet_out报文基于packet_in报文处理后生成;所述移位加密转换是将报文负载划分为若干个数据块,根据移位密钥对若干数据块进行移位,所述移位解密转换是将报文加密负载划分为若干数据块,通过移位密钥进行反向移位。与现有技术相比,本发明通过轻量化的移位转换机制实现多模态网络中的灵活、低开销的控制信令防窃听。