基于强化学习的仿生水下机器人节能游动步态学习方法和装置

    公开(公告)号:CN119356094A

    公开(公告)日:2025-01-24

    申请号:CN202411488200.6

    申请日:2024-10-24

    Abstract: 本发明提供一种基于强化学习的仿生水下机器人节能游动步态学习方法和装置,涉及机器人技术领域,包括:模仿仿生机器鱼的结构,设计构建基于细长体理论的强化学习仿真环境;基于机器鱼的任务目标及运动状态构建马尔可夫决策模型;基于强化学习,学习框架的仿鱼航行器高效节能间歇游动步态。本发明能够实现基于深度强化学习的机器鱼高效节能游动步态学习。

    网络安全防御系统、方法、设备及存储介质

    公开(公告)号:CN115801332A

    公开(公告)日:2023-03-14

    申请号:CN202211321238.5

    申请日:2022-10-26

    Abstract: 本发明提供一种网络安全防御系统、方法、设备及存储介质,涉及网络安全技术领域,其中网络安全防御系统,包括网络安全模块、主动防御模块、策略评估模块和被动防御模块,网络安全模块分别与主动防御模块和策略评估模块连接,策略评估模块与所述被动防御模块连接:网络安全模块针对获取的入侵告警信息,先经由主动防御模块通过自学习入侵警告信息后确定目标攻击类别及应对目标攻击类别的目标对抗策略集群信息,待网络安全模块执行目标对抗策略集群信息后生成的目标策略效能信息表征策略成功时,策略评估模块再生成主动防御成功的指示信息,并使得被动防御模块执行被动防御。使用网络安全防御系统能够大幅提高网络安全防御系统的可靠性和安全性。

    面向海产品抓取的双目视觉实时感知定位方法、系统、装置

    公开(公告)号:CN110232711B

    公开(公告)日:2021-08-13

    申请号:CN201910487521.7

    申请日:2019-06-05

    Abstract: 本发明属于计算机视觉领域,具体涉及一种面向海产品抓取的双目视觉实时感知定位方法、系统、装置,旨在解决海产品感知定位精度不够导致跟踪失败的问题。本系统方法包括获取双目视觉图像对并进行极线对齐;获取当前系统状态,若为true,基于深度学习算法获取对齐后的图像对中海产品的目标检测结果并根据左图、右图跟踪结果对比目标检测结果的中心点,得到跟踪器跟踪结果;若为false,所述目标检测结果包含任一预设种类海产品目标,将左图和右图的检测结果组成点对集合,进行极线、位置匹配,得到跟踪器跟踪结果,否则重新获取图相对;根据跟踪器跟踪结果和当前系统状态获取海产品种类及三维坐标。本发明提高了海产品感知定位的精度及可靠性。

    海产品抓取的双目视觉实时感知定位方法、系统、装置

    公开(公告)号:CN110232711A

    公开(公告)日:2019-09-13

    申请号:CN201910487521.7

    申请日:2019-06-05

    Abstract: 本发明属于计算机视觉领域,具体涉及一种海产品抓取的双目视觉实时感知定位方法、系统、装置,旨在解决海产品感知定位精度不够导致跟踪失败的问题。本系统方法包括获取双目视觉图像对并进行极线对齐;获取当前系统状态,若为true,基于深度学习算法获取对齐后的图像对中海产品的目标检测结果并根据左图、右图跟踪结果对比目标检测结果的中心点,得到跟踪器跟踪结果;若为false,所述目标检测结果包含任一预设种类海产品目标,将左图和右图的检测结果组成点对集合,进行极线、位置匹配,得到跟踪器跟踪结果,否则重新获取图相对;根据跟踪器跟踪结果和当前系统状态获取海产品种类及三维坐标。本发明提高了海产品感知定位的精度及可靠性。

    仿豹鲂鮄鱼水下机器人
    15.
    发明公开

    公开(公告)号:CN110203359A

    公开(公告)日:2019-09-06

    申请号:CN201910474817.5

    申请日:2019-06-03

    Abstract: 本发明属于仿生机器人技术领域,具体涉及一种仿豹鲂鮄鱼水下机器人,旨在解决现有技术中水下机器人的螺旋桨推进方式工作环境适应性差、运动状态不稳定、难以满足实际工作需求,低速运动时工作效率低等问题。本发明仿豹鲂鮄鱼水下机器人包括鱼身本体、背鳍、一对胸鳍、尾舱和尾鳍,所述鱼身本体内部设置有控制单元,本发明仿豹鲂鮄鱼水下机器人在控制单元的控制下,可以在水中采用两种推进模式,本发明兼具良好的机动性和运动稳定性,环境适应性强,可在复杂的海底环境中实现平稳运动,同时本发明拥有信息采集模块和探测模块可应用于水下环境监测、水下勘察。

    水下机器人运动控制方法、装置、系统、设备和存储介质

    公开(公告)号:CN115808931A

    公开(公告)日:2023-03-17

    申请号:CN202310071091.7

    申请日:2023-02-07

    Abstract: 本发明涉及机器人技术领域,提供一种水下机器人运动控制方法、装置、系统、设备和存储介质,其中方法包括:获取待控制的水下机器人的当前运动状态和任务目标;将当前运动状态和任务目标输入至反馈控制器,得到反馈控制器输出的第一控制动作;将当前运动状态和任务目标输入至残差控制器,得到残差控制器输出的第二控制动作,残差控制器是基于强化学习方法在仿真环境中训练得到的,仿真环境基于周期性参数随机化策略调整;基于第一控制动作和第二控制动作,对水下机器人进行运动控制。本发明实施例提供的水下机器人运动控制方法、装置、系统、设备和存储介质,实现在扰动情况下对水下机器人进行高效、精准的运动控制。

    机器人技能学习的方法、装置、电子设备及存储介质

    公开(公告)号:CN113919475A

    公开(公告)日:2022-01-11

    申请号:CN202111537547.1

    申请日:2021-12-16

    Abstract: 本发明公开了机器人技能学习的方法、装置、电子设备及存储介质,包括:获取多个连续等间隔时刻的环境状态;环境状态包含机器人状态以及任务阶段标志符;将多个连续等间隔时刻的环境状态输入至训练好的机器人技能学习模型,得到机器人学习技能的动作描述信息序列;根据动作描述信息序列确定机器人执行的动作序列。本发明通过将多个连续等间隔时刻的环境状态输入至机器人技能学习模型,得到机器人学习技能的动作描述信息序列,从而实现机器人技能学习,解决了在面对多阶段复杂任务时易导致的难收敛、成功率较低的问题,提高了鲁棒性,实现了机器人复杂技能的高效、精准学习。

Patent Agency Ranking