发明公开
- 专利标题: 一种基于改进Q学习的无人机航迹规划方法
-
申请号: CN202310730071.6申请日: 2023-06-20
-
公开(公告)号: CN116839582A公开(公告)日: 2023-10-03
- 发明人: 杨沛豪 , 柴琦 , 兀鹏越 , 赵俊博 , 陈予伦 , 寇水潮 , 王小辉 , 高峰 , 孙梦瑶 , 郭新宇 , 薛磊 , 张立松 , 贺婷 , 燕云飞 , 李志鹏 , 郭昊 , 王劼文 , 高欢欢 , 殷悦 , 代本谦 , 李菁华
- 申请人: 西安热工研究院有限公司
- 申请人地址: 陕西省西安市碑林区兴庆路136号
- 专利权人: 西安热工研究院有限公司
- 当前专利权人: 西安热工研究院有限公司
- 当前专利权人地址: 陕西省西安市碑林区兴庆路136号
- 代理机构: 北京清亦华知识产权代理事务所
- 代理商 谢雪闽
- 主分类号: G01C21/20
- IPC分类号: G01C21/20 ; G06N20/00 ; G06N7/01
摘要:
本申请提出的基于改进Q学习的无人机航迹规划方法、装置及存储介质中,包括通过三维网格法对无人机飞行环境进行三维环境建模,并将无人机飞行空间位置单元分割成相同立方体状;基于三维环境建模,构建用于求解无人机路径规划的马尔科夫决策过程模型;基于马尔科夫决策过程模型和无人机飞行的任务参数,通过饱和状态的搜索策略和改进Q学习算法,得到无人机最优航迹规划;将无人机最优航迹规划输入至三维环境建模中,得到无人机最优航迹的路径仿真结果。由此,本申请中通过饱和状态的搜索策略和改进Q学习算法,得到无人机最优航迹规划的过程中,改进Q学习算法减少了所需要学习的参数量,提高了学习效率,加快了算法收敛速度,从而节约资源。
IPC分类: