一种基于注意力机制强化学习的边缘网络设备缓存方法

    公开(公告)号:CN113411826B

    公开(公告)日:2022-05-20

    申请号:CN202110672219.6

    申请日:2021-06-17

    申请人: 天津大学

    IPC分类号: H04W24/06 H04W28/14

    摘要: 本发明公开了一种基于注意力机制强化学习的边缘网络设备缓存方法,包括如下步骤:建立蜂窝网络模型,蜂窝网络模型包括用户设备、边缘网络设备和核心网络,每个边缘网络设备中均设有行动网络模块和评价网络模块;边缘网络设备接收所在区域内的用户设备发出的请求;每个边缘网络设备获取其它边缘网络设备的观测值;每个边缘网络设备依据缓存替换策略和观测值选取动作;边缘网络设备发送动作和更新后的状态到邻接边缘网络设备;根据动作更新后的观测值和动作价值函数对行动网络模块和评价网络模块的参数进行更新;根据目标函数对缓存替换策略进行优化。本发明可以减少从云数据中心重复下载文件的次数,降低延迟,提升网络服务质量与用户体验质量。

    一种基于机器学习的移动网络边缘协作缓存模型构造方法

    公开(公告)号:CN110312277B

    公开(公告)日:2022-01-28

    申请号:CN201910277048.X

    申请日:2019-04-08

    申请人: 天津大学

    IPC分类号: H04W24/06

    摘要: 本发明公开了一种基于机器学习的移动网络边缘协作缓存模型构造方法,步骤1、根据用户发送内容请求数据建立网络训练模型;步骤2、网络训练模型中判断路由模块按照自适应选择动作要求对用户发送内容请求数据进行基站识别;步骤3、网络训练模型中更新模块按照替换动作要求对本地基站缓存替换;步骤4、重复步骤1~3直至网络训练模型稳定,该方法可以显著降低用户接入时延、提高缓存命中率已经缓解主干网流量压力。

    适于自适应限流直流固态断路器的直流电源及其控制方法

    公开(公告)号:CN110071488B

    公开(公告)日:2022-01-04

    申请号:CN201910228173.1

    申请日:2019-03-25

    申请人: 天津大学

    IPC分类号: H02H7/26 H02H7/28 H02H9/02

    摘要: 本发明公开了一种适于自适应限流直流固态断路器的直流电源及其控制方法,为三相半波整流电路与电源保护电路串联的电路。正常运行状态,单向导通可关断开关处于导通状态,单向导通晶闸管处于关断状态;直流电源电压设置为使Ib略大于直流系统的额定电流,或者略大于正常运行时可能出现的最大负荷电流;当直流系统发生故障时,直流电抗器接入到故障回路后,上升到Ib时,单向导通可关断开关立即关断,单向导通晶闸管立即导通;此时直流电源退出故障电流流通路径;当直流系统故障点消失或被排查清除时,直流电抗器电流下降到Ib时,立即导通单向导通可关断开关上,单向导通晶闸管在直流电源反向电压作用下立即关断,直流电源恢复至正常运行状态。

    一种基于注意力机制强化学习的边缘网络设备缓存方法

    公开(公告)号:CN113411826A

    公开(公告)日:2021-09-17

    申请号:CN202110672219.6

    申请日:2021-06-17

    申请人: 天津大学

    IPC分类号: H04W24/06 H04W28/14

    摘要: 本发明公开了一种基于注意力机制强化学习的边缘网络设备缓存方法,包括如下步骤:建立蜂窝网络模型,蜂窝网络模型包括用户设备、边缘网络设备和核心网络,每个边缘网络设备中均设有行动网络模块和评价网络模块;边缘网络设备接收所在区域内的用户设备发出的请求;每个边缘网络设备获取其它边缘网络设备的观测值;每个边缘网络设备依据缓存替换策略和观测值选取动作;边缘网络设备发送动作和更新后的状态到邻接边缘网络设备;根据动作更新后的观测值和动作价值函数对行动网络模块和评价网络模块的参数进行更新;根据目标函数对缓存替换策略进行优化。本发明可以减少从云数据中心重复下载文件的次数,降低延迟,提升网络服务质量与用户体验质量。

    一种基于机器学习的流量采样和应用感知的系统

    公开(公告)号:CN110601916A

    公开(公告)日:2019-12-20

    申请号:CN201910748798.0

    申请日:2019-08-14

    申请人: 天津大学

    IPC分类号: H04L12/26 H04L12/24

    摘要: 本发明公开了一种基于机器学习的针对网络流量进行精准采样和应用感知的系统,包括SDN控制器、神经网络和DPI收集器;该系统还包括采样节点选取模块、交换模块和策略控制模块;其中:所述采样节点选取模块从SDN控制器选取节点ID和数据流信息;所述交互模块负责将获取的节点ID和数据流信息发送给深度神经网络,并接受神经网络关于采样资源分配的反馈信息;采样策略控制模块负责为选取出来的采样节点分配采样时长;该系统实现了高精度的、全局的、灵敏的流量采集;并基于机器学习的机制来适应动态多变的网络流量。

    适于自适应限流直流固态断路器的直流电源及其控制方法

    公开(公告)号:CN110071488A

    公开(公告)日:2019-07-30

    申请号:CN201910228173.1

    申请日:2019-03-25

    申请人: 天津大学

    IPC分类号: H02H7/26 H02H7/28 H02H9/02

    摘要: 本发明公开了一种适于自适应限流直流固态断路器的直流电源及其控制方法,为三相半波整流电路与电源保护电路串联的电路。正常运行状态,单向导通可关断开关处于导通状态,单向导通晶闸管处于关断状态;直流电源电压设置为使Ib略大于直流系统的额定电流,或者略大于正常运行时可能出现的最大负荷电流;当直流系统发生故障时,直流电抗器接入到故障回路后,上升到Ib时,单向导通可关断开关立即关断,单向导通晶闸管立即导通;此时直流电源退出故障电流流通路径;当直流系统故障点消失或被排查清除时,直流电抗器电流下降到Ib时,立即导通单向导通可关断开关上,单向导通晶闸管在直流电源反向电压作用下立即关断,直流电源恢复至正常运行状态。

    一种基于可重构智能表面的自组织边缘用户分配系统及方法

    公开(公告)号:CN117692339A

    公开(公告)日:2024-03-12

    申请号:CN202311564388.3

    申请日:2023-11-22

    申请人: 天津大学

    摘要: 本发明公开一种基于可重构智能表面的自组织边缘用户分配系统,所述自组织边缘用户分配系统包括用户层、服务层;所述自组织边缘用户分配系统还包括可重构智能表面层;所述用户层用于发送网络中设备任务请求;所述可重构智能表面层通过响应快速通道对请求任务处理获得优化时间的请求任务队列;所述服务层通过最大独立集的用户分配算法对优化时间的请求任务队列请求数量最多任务处理输出最优任务选择处理匹配策略,本发明通过可重构智能表面层参考不同用户和业务场景的需求对算力网络进行拓扑重构,从而显著提高智能网络数据传输和处理的延迟。

    基于图注意力网络的多任务边缘计算调度优化方法

    公开(公告)号:CN113946423A

    公开(公告)日:2022-01-18

    申请号:CN202111211526.0

    申请日:2021-10-18

    申请人: 天津大学

    摘要: 本发明公开了一种基于图注意力网络的多任务边缘计算调度优化方法,包括如下步骤:构建基于演员‑评论家模型的MEC系统通信模型,包括边缘服务器、用户设备和云端,边缘服务器为智能体;每个决策时间t,调度智能体利用图注意力网络获取用户设备所生成应用程序的任务状态利用多层感知器获取MEC系统状态SN;通过双层嵌入将任务状态和MEC系统状态SN组成状态嵌入向量输入演员‑评论家模型,利用演员‑评论家模型进行训练获取最佳调度策略。本发明可以降低所有用户的平均ETC,提升网络服务质量和用户体验。

    一种基于机器学习的移动网络边缘协作缓存模型构造方法

    公开(公告)号:CN110312277A

    公开(公告)日:2019-10-08

    申请号:CN201910277048.X

    申请日:2019-04-08

    申请人: 天津大学

    IPC分类号: H04W24/06 H04L12/24

    摘要: 本发明公开了一种基于机器学习的移动网络边缘协作缓存模型构造方法,步骤1、根据用户发送内容请求数据建立网络训练模型;步骤2、网络训练模型中判断路由模块按照自适应选择动作要求对用户发送内容请求数据进行基站识别;步骤3、网络训练模型中更新模块按照替换动作要求对本地基站缓存替换;步骤4、重复步骤1~3直至网络训练模型稳定,该方法可以显著降低用户接入时延、提高缓存命中率已经缓解主干网流量压力。