具有时间特征提取机制的深度强化学习多智能体协同围捕方法及其围捕系统

    公开(公告)号:CN118036644A

    公开(公告)日:2024-05-14

    申请号:CN202410079321.9

    申请日:2024-01-19

    摘要: 本发明属于多智能体协同围捕领域,提供一种具有时间特征提取机制的深度强化学习多智能体协同围捕方法及其围捕系统。步骤1:初始化环境信息,确定智能体逃跑策略,确定演员网络与中心评论员网络的观测空间,构造奖励函数,构造围捕任务完成条件;步骤2:构建MADDPG架构,其中包括一个具有时间特征提取机制的中心评论员网络以及演员网络;步骤3:智能体与环境信息交互,收集数据,进行预热;步骤4:更新神经网络参数;步骤5:重复步骤4直到完成训练回合数,最终得到训练完成的演员网络,以实现多智能体协同围捕。对于围捕任务来说,准确提取时间特征至关重要,它不仅能显著提升围捕的成功率,也是推进多智能体系统智能化水平的关键。

    一种无人机航迹规划方法
    3.
    发明公开

    公开(公告)号:CN116698037A

    公开(公告)日:2023-09-05

    申请号:CN202310631500.4

    申请日:2023-05-31

    摘要: 本发明公开了一种无人机航迹规划方法,无人机获取自身和目标信息,获取每个时刻状态,将每个时刻状态输入至预先训练好的DDPG网络,DDPG网络包括Actor网络和Critic网络,利用Actor在线网络决策每个时刻无人机飞行动作,形成最终航迹;DDPG网络的训练过程包括:对无人机航迹规划场景进行建模,设计无人机航迹规划模型状态空间、动作空间、奖励函数以及网络训练参数;采用融合沙丘噪声灵敏度和萤火因子的改进蜣螂算法优化奖励函数的奖励系数,获取最优系数组合,根据最优系数组合和网络训练参数对DDPG网络进行训练,得到训练好的网络。本发明解决了模型适配场景有限、收敛效果不佳问题,提高航迹规划可靠性。

    一种禁忌搜索人工蜂群算法下的北斗导航选星方法

    公开(公告)号:CN112578414B

    公开(公告)日:2023-07-25

    申请号:CN202011336466.0

    申请日:2020-11-25

    IPC分类号: G01S19/28 G01S19/37

    摘要: 本发明提供一种禁忌搜索人工蜂群算法下的北斗导航选星方法,方法步骤为:通过获取得到的地面观测点位置信息与北斗导航卫星实时位置信息,计算地面观测点处各北斗导航卫星高度角、方位角;以地面观测点处遮蔽角对各北斗导航卫星进行筛选得到可视卫星集合;利用禁忌搜索人工蜂群算法,以卫星组合方案的几何精度因子GDOP为目标函数,在解空间内对卫星组合方案寻优求解,得到具有最小GDOP的卫星组合方案。本发明将基于禁忌搜索人工蜂群算法应用于北斗导航选星过程,充分发挥人工蜂群算法预先设置参数少,寻优能力强的特点,寻优速度快等优点,有效提高北斗导航应用中选星过程效率,具有较大的价值和实用性。

    一种基于扩展一致性束算法的多障碍物环境下水面多无人艇任务分配方法

    公开(公告)号:CN116205464A

    公开(公告)日:2023-06-02

    申请号:CN202310277395.9

    申请日:2023-03-21

    摘要: 一种基于扩展一致性束算法的多障碍物环境下水面多无人艇任务分配方法,涉及多智能体任务分配领域。解决现有水面多无人艇任务分配问题采用扩展一致性束算法,忽略了外界环境对于多无人艇系统产生的约束,而带来的系统能量消耗增大且执行任务效率下降的问题。分配方法为:扫描水面上的障碍物,获得含有障碍物的栅格地图;提取含有障碍物的栅格地图,获得导航对集合;处理多无人艇的自身信息,获得多无人艇的初始化信息;分解任务需求,获得任务的初始化信息;根据多无人艇的初始化信息、任务的初始化信息和导航对集合,并采用改进的扩展一致性束算法对多无人艇进行任务分配,获得多无人艇任务分配效果图。本发明适用于水面多无人艇的智能分配。

    一种基于sink节点牵引力的水下传感器节点非均匀部署方法和装置

    公开(公告)号:CN115720340A

    公开(公告)日:2023-02-28

    申请号:CN202211452987.1

    申请日:2022-11-21

    摘要: 一种基于sink节点牵引力的水下传感器节点非均匀部署方法和装置,解决了针对覆盖率优化的部署方案往往由于连通度差而缺少实用性的问题。涉及水下传感器网络领域。方法包括:引入sink节点牵引力改进虚拟力算子,并根据改进的虚拟力算子进行导向,获取粒子速度更新公式;根据粒子速度更新公式计算初部署的坐标;根据抽样检测法计算所述初部署的坐标空洞,根据虚拟力算法进行空洞修复,获取网络部署坐标;根据网络部署坐标与实际抛洒水面节点相对应,获取最短移动距离的网络部署,完成网络部署。本发明应用于海洋检测领域。

    一种线性调频信号脉冲压缩响应旁瓣抑制方法

    公开(公告)号:CN115561712A

    公开(公告)日:2023-01-03

    申请号:CN202211160213.1

    申请日:2022-09-22

    IPC分类号: G01S7/28 G06N3/00

    摘要: 本发明公开了一种线性调频信号脉冲压缩响应旁瓣抑制方法,对线性调频信号进行脉冲压缩得到一维点目标脉冲压缩响应;使用三阶空间变迹滤波器的频域窗函数分别对一维点目标脉冲压缩响的实部和虚部进行频域加权;确定滤波器系数的约束空间;采用灰狼优化算法对一维点目标脉冲压缩响应实部和虚部的理想滤波结果分别逐点操作完成寻优过程,在约束空间内逐点搜索滤波数据可以取得的最大值和最小值;根据寻优结果判定信号最终的滤波结果,根据一维点目标脉冲压缩响应实部和虚部的滤波结果计算复数信号滤波处理结果。本发明提高了滤波器的阶数,增加了解空间的维度,提高了滤波器的灵活度,可以有效地抑制旁瓣。本发明利用灰狼优化算法进行有效点搜索,减小了人们在分析约束空间边界点的计算量。

    一种基于自适应黑蜘蛛猴算法的辐射源个体识别方法

    公开(公告)号:CN115114960A

    公开(公告)日:2022-09-27

    申请号:CN202210767193.8

    申请日:2022-06-30

    摘要: 本发明属于信号识别技术领域,具体涉及一种基于自适应黑蜘蛛猴算法的辐射源个体识别方法。本发明通过构造类内、类间离差矩阵,设计离差损失,融合四元组和中心聚类损失,使得损失函数的构建更具可靠性;通过设计自适应黑蜘蛛猴算法对损失函数权重寻优,构建改变搜索方向的标志,利用螺旋优化搜索,扩大搜索范围,引入探索和平衡开发因子,使权重随迭代次数改变,减少了权重变化的盲目性,增强了辐射源个体识别方法的泛化性、准确性和适应性。本发明不仅能提高网络收敛速度,增加网络的泛化性和可靠性,还能准确实现辐射源个体识别,具备较好的适用性。

    一种认知无线电中信道质量性接入方法

    公开(公告)号:CN112954814B

    公开(公告)日:2022-05-20

    申请号:CN202110107271.7

    申请日:2021-01-27

    摘要: 本发明提供了一种认知无线电中信道质量性接入方法,具体步骤为:本地网络有自己的演员网络与评论家网络,演员网络负责信道选择,与环境进行互动收集交互信息,评论家网络评价演员网络信道选择策略的优劣,但是本地网络不更新梯度,而是将梯度收集起来传递给全局网络,全局网络自身不与环境进行交互,其将各个本地网络收集到的梯度汇总起来,在自身上进行梯度更新,并且将更新后的网络参数再次传给本地网络。本发明综合考虑了信道质量和空闲概率,次用户能够有效避免接入劣质信道,大幅提高接入符合服务质量要求的接入成功率。