Invention Publication
- Patent Title: 一种基于SAC的水下机器人自主控制方法
-
Application No.: CN202111496814.5Application Date: 2021-12-09
-
Publication No.: CN114371719APublication Date: 2022-04-19
- Inventor: 张金 , 罗仕清 , 杨睿 , 陈新
- Applicant: 湖南国天电子科技有限公司
- Applicant Address: 湖南省长沙市岳麓西大道芯城科技园3栋12层
- Assignee: 湖南国天电子科技有限公司
- Current Assignee: 湖南国天电子科技有限公司
- Current Assignee Address: 湖南省长沙市岳麓西大道芯城科技园3栋12层
- Agency: 长沙大珂知识产权代理事务所
- Agent 王琼琦
- Main IPC: G05D1/06
- IPC: G05D1/06 ; G06K9/00 ; G06K9/62 ; G06N3/04 ; G06N3/08

Abstract:
本发明涉及水下机器人行为控制的技术领域,公开了一种基于SAC的水下机器人自主控制方法,包括:构建智能体分解模型,利用智能体分解模型将水下机器人分解为若干智能体;构建注意力图神经网络模型,将智能体状态映射为智能体依赖关系图;构建水下机器人控制策略模型;根据映射得到的智能体依赖关系图确定智能体执行动作的反馈收益,以智能体反馈收益为基础构建水下机器人控制策略模型的目标函数,并利用SAC算法对目标函数进行求解,得到水下机器人最优控制策略。本发明所述方法通过将水下机器人控制策略优化问题转换为多智能体控制策略优化问题,利用强化学习方法寻找智能体控制的最优策略,实现水下机器人的实时自主控制。
Public/Granted literature
- CN114371719B 一种基于SAC的水下机器人自主控制方法 Public/Granted day:2023-08-08
Information query