发明公开
- 专利标题: 基于协作Q学习的分布式卫星网络智能负载均衡方法
-
申请号: CN202110654258.3申请日: 2021-06-11
-
公开(公告)号: CN115473561A公开(公告)日: 2022-12-13
- 发明人: 姚海鹏 , 秦泽宇 , 赵玉桐 , 张尼 , 买天乐 , 吴云峰 , 韩庆敏 , 忻向军 , 韩宝磊 , 张琦
- 申请人: 北京邮电大学 , 中国电子信息产业集团有限公司第六研究所
- 申请人地址: 北京市海淀区西土城路10号;
- 专利权人: 北京邮电大学,中国电子信息产业集团有限公司第六研究所
- 当前专利权人: 北京邮电大学,中国电子信息产业集团有限公司第六研究所
- 当前专利权人地址: 北京市海淀区西土城路10号;
- 代理机构: 北京欣鼎专利代理事务所
- 代理商 王阳虹
- 主分类号: H04B7/185
- IPC分类号: H04B7/185 ; H04W28/08
摘要:
本发明公开一种基于协作Q学习的分布式卫星网络智能负载均衡方法,包括:所述方法将Co l l aQ强化学习算法应用于卫星通信,其数据传输过程为:1).地面将数据包发送到卫星,接收卫星将数据包缓存在队列中;2).卫星根据所提出的算法将数据包发送到相邻卫星;3).目的卫星将信息发送回地面上的目的地。每个轨道上分布的卫星数相等,将轨道数定义为m,每个轨道中的卫星数为n。相邻轨道之间的经度差为360°/m,同一轨道中相邻卫星之间的经度差为180°/n。在本发明中Co l l aQ算法在处理环境中复杂的Agent拓扑时具有良好的收敛性,并且可以很好地应对系统规模的变化。Col laQ的性能要优于DDPG,并且网络中的最大链路利用率相对较小,这意味着它可以更有效地实现负载平衡。
公开/授权文献
- CN115473561B 基于协作Q学习的分布式卫星网络智能负载均衡方法 公开/授权日:2023-06-30