面向基地攻防任务的UUV红蓝方威胁评估方法

    公开(公告)号:CN110163519B

    公开(公告)日:2023-08-18

    申请号:CN201910454595.0

    申请日:2019-05-29

    IPC分类号: G06Q50/26 G06Q10/063 G06N7/01

    摘要: 本发明提供一种面向基地攻防任务的UUV红蓝方威胁评估方法,步骤一、红蓝方威胁态势评估要素分析;步骤二、通过对红蓝方威胁态势要素的分析,建立红蓝方态势威胁评估贝叶斯网络,贝叶斯网络的根节点为威胁评估的结果为威胁等级,子节点为相应威胁要素;步骤三、建立红蓝方态势威胁评估贝叶斯网络条件概率表;步骤四、依据当前红蓝方态势判断各个贝叶斯网络节点状态并将其作为贝叶斯网络的输入得到根节点的概率,得到威胁评估的结果。本发明提供一种面向基地攻防任务的UUV红蓝方威胁评估方法,通过不同的仿真案例展现出对UUV威胁评估的有效性。

    动态环境下基于深度强化学习的移动机器人避碰规划方法

    公开(公告)号:CN110632931B

    公开(公告)日:2022-06-21

    申请号:CN201910953396.4

    申请日:2019-10-09

    摘要: 本发明公开一种动态环境下基于深度强化学习的移动机器人避碰规划方法,属于移动机器人导航技术领域。本发明通过激光测距仪采集原始数据,将原始数据处理后作为神经网络的输入,建立LSTM神经网络,通过A3C算法,神经网络输出相应参数,经过处理获得机器人每一步的动作。本发明无需对环境进行建模,更加适用于未知障碍物环境,采用actor‑critic框架与时间差分算法,实现低方差的同时更适用于连续动作空间,实现边训练边学习的效果。设计具有艏向转角限制的连续动作空间,且采用4个线程并行学习训练,与一般深度强化学习方法相比,大大提高学习训练时间,减少样本相关性,保障探索空间的高利用性与探索策略的多样性,从而提升算法收敛性、稳定性以及避障成功率。

    动态环境下基于深度强化学习的移动机器人避碰规划方法

    公开(公告)号:CN110632931A

    公开(公告)日:2019-12-31

    申请号:CN201910953396.4

    申请日:2019-10-09

    IPC分类号: G05D1/02

    摘要: 本发明公开一种动态环境下基于深度强化学习的移动机器人避碰规划方法,属于移动机器人导航技术领域。本发明通过激光测距仪采集原始数据,将原始数据处理后作为神经网络的输入,建立LSTM神经网络,通过A3C算法,神经网络输出相应参数,经过处理获得机器人每一步的动作。本发明无需对环境进行建模,更加适用于未知障碍物环境,采用actor-critic框架与时间差分算法,实现低方差的同时更适用于连续动作空间,实现边训练边学习的效果。设计具有艏向转角限制的连续动作空间,且采用4个线程并行学习训练,与一般深度强化学习方法相比,大大提高学习训练时间,减少样本相关性,保障探索空间的高利用性与探索策略的多样性,从而提升算法收敛性、稳定性以及避障成功率。

    面向基地攻防任务的UUV红蓝方威胁评估方法

    公开(公告)号:CN110163519A

    公开(公告)日:2019-08-23

    申请号:CN201910454595.0

    申请日:2019-05-29

    IPC分类号: G06Q10/06 G06Q50/26 G06N7/00

    摘要: 本发明提供一种面向基地攻防任务的UUV红蓝方威胁评估方法,步骤一、红蓝方威胁态势评估要素分析;步骤二、通过对红蓝方威胁态势要素的分析,建立红蓝方态势威胁评估贝叶斯网络,贝叶斯网络的根节点为威胁评估的结果为威胁等级,子节点为相应威胁要素;步骤三、建立红蓝方态势威胁评估贝叶斯网络条件概率表;步骤四、依据当前红蓝方态势判断各个贝叶斯网络节点状态并将其作为贝叶斯网络的输入得到根节点的概率,得到威胁评估的结果。本发明提供一种面向基地攻防任务的UUV红蓝方威胁评估方法,通过不同的仿真案例展现出对UUV威胁评估的有效性。

    未知静态障碍环境下USV基于改进蚁群优化的避碰规划方法

    公开(公告)号:CN109685286B

    公开(公告)日:2022-08-02

    申请号:CN201910032579.2

    申请日:2019-01-14

    摘要: 未知静态障碍环境下USV基于改进蚁群优化的避碰规划方法,属于水面无人艇避碰规划技术领域。本发明首先构建全局坐标系和局部坐标系,建立导航雷达仿真模型;设计用于实时避碰规划的滚动优化窗口;然后采用可视图法构建环境模型;设计用于实时避碰规划的改进蚁群优化方法;最后将导航雷达探测信息及目标点信息输入至基于改进蚁群优化方法的USV静态避碰规划器,获得USV下一时刻的转艏及速度的调整指令。本发明将滚动优化窗口法与改进蚁群优化方法相结合,提高了USV在线规划的实时性;针对于蚁群优化方法收敛速度慢,提出了改进的伪随机比例规则对蚂蚁状态转移进行选择;借鉴狼群分配原则和最大最小蚂蚁系统对全局信息素进行更新,避免搜索陷入局部最优。

    一种面向基地攻防任务的多UUV红蓝方AHP威胁评估方法

    公开(公告)号:CN110188461A

    公开(公告)日:2019-08-30

    申请号:CN201910454611.6

    申请日:2019-05-29

    IPC分类号: G06F17/50 G06Q10/06 G06Q50/26

    摘要: 本发明提供一种面向基地攻防任务的多UUV红蓝方AHP威胁评估方法,步骤一、搭建层次结构模型;步骤二、分析同一层的各评价指标对上一层中某准则的重要程度,并进行两两对比,按9标度法构造成对对比矩阵;步骤三、计算各评价指标对于该准则的相对权重;步骤四、计算各层指标对评估目标的综合权重,进行层次单排序及其一致性检验;步骤五、层次总排序与一致性检验,各个目标的权重排序,选择威胁程度最大的红方UUV为目标UUV进行优先攻击。本发明提供一种面向基地攻防任务的多UUV红蓝方AHP威胁评估方法,通过仿真案例展现出对多UUV目标威胁评估的有效性。

    未知静态障碍环境下USV基于改进蚁群优化的避碰规划方法

    公开(公告)号:CN109685286A

    公开(公告)日:2019-04-26

    申请号:CN201910032579.2

    申请日:2019-01-14

    摘要: 未知静态障碍环境下USV基于改进蚁群优化的避碰规划方法,属于水面无人艇避碰规划技术领域。本发明首先构建全局坐标系和局部坐标系,建立导航雷达仿真模型;设计用于实时避碰规划的滚动优化窗口;然后采用可视图法构建环境模型;设计用于实时避碰规划的改进蚁群优化方法;最后将导航雷达探测信息及目标点信息输入至基于改进蚁群优化方法的USV静态避碰规划器,获得USV下一时刻的转艏及速度的调整指令。本发明将滚动优化窗口法与改进蚁群优化方法相结合,提高了USV在线规划的实时性;针对于蚁群优化方法收敛速度慢,提出了改进的伪随机比例规则对蚂蚁状态转移进行选择;借鉴狼群分配原则和最大最小蚂蚁系统对全局信息素进行更新,避免搜索陷入局部最优。

    基于深度双Q网络强化学习的UUV实时避碰规划方法

    公开(公告)号:CN110716575A

    公开(公告)日:2020-01-21

    申请号:CN201910934538.2

    申请日:2019-09-29

    IPC分类号: G05D1/06

    摘要: 本发明属于UUV控制技术领域,具体涉及一种基于深度双Q网络强化学习的UUV实时避碰规划方法。本发明提供了一种适用于UUV工作环境和感知特点的自主避碰规划方法,通过UUV与环境之间不断地试错交互,利用成功或失败的经验,产生奖励或惩罚的信号不断地改进UUV的策略,让UUV具有自我学习的能力。本发明使网络体系在复杂环境的局部避碰规划时具有自我学习的能力实现端到端模型,通过直接从原始数据集上学习状态与动作的映射关系,将深度学习和强化学习相结合应用到避碰规划问题的解决上。本发明使用深度强化学习,不会因为路径过于复杂而无法执行策略,使其在实际应用中缩短了项目的开发周期、实施更加简洁、高效、鲁棒性高。