一种基于深度强化学习的换挡策略动态优化方法

    公开(公告)号:CN110716550A

    公开(公告)日:2020-01-21

    申请号:CN201911076016.X

    申请日:2019-11-06

    Abstract: 本发明属于工程机械及车辆工程领域,具体涉及一种基于深度强化学习的换挡策略动态优化方法。包括如下步骤:(1):确定换挡策略状态输入变量和动作输出变量;(2):根据状态输入变量和动作输出变量,确定换挡策略马尔科夫决策过程;(3):根据换挡策略目标建立强化学习换挡策略奖励函数;(4):根据马尔科夫决策过程和奖励函数,求解深度强化学习换挡策略;(5):将步骤(4)计算出的预测Q网络放入换挡策略控制器,工程机械及车辆在行驶过程中,工程机械及车辆根据换挡策略控制器选择挡位;(6):在行驶过程中定期更新预测Q网络。本发明通过深度强化学习方法对换挡策略进行更新,实现换挡策略的动态优化。

    集成神经网络与物理系统模型的换挡负载动态模拟方法

    公开(公告)号:CN110298073A

    公开(公告)日:2019-10-01

    申请号:CN201910421689.8

    申请日:2019-05-21

    Abstract: 本发明提供了一种集成神经网络与物理系统模型的换挡负载动态模拟方法,该方法将换挡负载分解为挂挡方向负载和选挡方向负载,并根据负载特点建立神经网络挂挡负载模型和阻尼系统选挡负载模型。神经网络挂挡负载模型输入为归一化挂挡位移和归一化挂挡速度,输出为归一化挂挡负载,经反归一化处理后成为挂挡负载。阻尼系统选挡负载模型根据选挡速度计算出选挡负载。最后通过挂挡负载和选挡负载计算出换挡负载。本发明将换挡负载分解为挂挡方向负载和选挡方向负载,并将具有强非线性和时变特性的挂挡方向负载通过神经网络进行拟合,实用性好。以该方法可以更好的模拟出换挡过程中的换挡负载变化情况。

    一种集成驾驶员决策行为的智能操纵方法

    公开(公告)号:CN110989346B

    公开(公告)日:2022-11-15

    申请号:CN201911233699.5

    申请日:2019-12-05

    Abstract: 本发明提供了一种集成驾驶员决策行为的智能转向操纵方法,把转向过程分为角度决策模块以及角速度决策模块得出理想的偏转角度,将该偏转角度作为工程机械及车辆模型的输入,完成路径跟踪,将航向角偏差与路径偏差作为调整角度策略模块的输入,得出偏转角度值大小,再根据航向角偏差与路径偏差的正负得出偏转角度的方向,将偏转角度以及行驶速度作为调整角速度策略模块的输入,建立双输入单输出的偏转角速度模糊控制器,输出理想的偏转角速度,最后将偏转角度作为工程机械及车辆模型的输入,输出实际路径点以及航向角反馈回输入端,形成完整的闭环系统。本发明鲁棒性强、实用性好,该方法可以更符合驾驶员推理和决策行为。

    一种汽车转向机械手的角度调节装置

    公开(公告)号:CN108128345A

    公开(公告)日:2018-06-08

    申请号:CN201711311302.0

    申请日:2017-12-11

    Abstract: 本发明提供了一种汽车转向机械手的角度调节装置,包括支架、内螺纹管、螺纹管、锥齿轮副、手轮。支架与外部部件转动连接,锥齿轮副设置于支架内,螺纹管穿过支架的侧壁与锥齿轮副的第一锥齿轮固定连接,内螺纹管一端与外部部件转动连接,内螺纹管另一端端面设置内壁带螺纹的螺纹槽,螺纹管与螺纹槽螺纹连接,手轮穿过支架的侧壁与锥齿轮副的第二锥齿轮固定连接。

    集成神经网络与物理系统模型的换挡负载动态模拟方法

    公开(公告)号:CN110298073B

    公开(公告)日:2022-07-22

    申请号:CN201910421689.8

    申请日:2019-05-21

    Abstract: 本发明提供了一种集成神经网络与物理系统模型的换挡负载动态模拟方法,该方法将换挡负载分解为挂挡方向负载和选挡方向负载,并根据负载特点建立神经网络挂挡负载模型和阻尼系统选挡负载模型。神经网络挂挡负载模型输入为归一化挂挡位移和归一化挂挡速度,输出为归一化挂挡负载,经反归一化处理后成为挂挡负载。阻尼系统选挡负载模型根据选挡速度计算出选挡负载。最后通过挂挡负载和选挡负载计算出换挡负载。本发明将换挡负载分解为挂挡方向负载和选挡方向负载,并将具有强非线性和时变特性的挂挡方向负载通过神经网络进行拟合,实用性好。以该方法可以更好的模拟出换挡过程中的换挡负载变化情况。

    一种集成模糊神经网络的自适应路径跟踪方法

    公开(公告)号:CN110989597B

    公开(公告)日:2022-06-10

    申请号:CN201911233698.0

    申请日:2019-12-05

    Abstract: 本发明提供了一种集成模糊神经网络的自适应路径跟踪方法,该方法通过判断工程机械或车辆实际位置点的与期望路径的横向位移偏差大小,决定出理想的偏转角度,将目标路径坐标点的曲率以及与实际行驶路径坐标点的横向偏差作为状态切换器的输入,状态切换器判断出工程机械或车辆是否偏离理想路径,再计算出理想偏转角度,横向控制器内部通过训练神经网络得出Jacobian信息,通过该信息整定自抗扰控制器参数,输出模糊神经自抗扰控制律,最后将控制律输入工程机械及车辆动力学模型中,该动力学模型输出实际行驶路径点反馈回输入端,形成完整的闭环控制系统。本发明可以增强控制器的抗干扰能力以及自适应性,提高对目标路径的跟踪精度。

    一种机器人驾驶车辆集成协调控制方法

    公开(公告)号:CN109991856B

    公开(公告)日:2022-04-08

    申请号:CN201910338665.6

    申请日:2019-04-25

    Abstract: 本发明提供了一种机器人驾驶车辆集成协调控制方法,包括:建立机器人驾驶车辆动力学模型;建立考虑模型不确定性和外部干扰的机器人驾驶车辆动力学模型;建立驾驶员车速控制行为模型和驾驶员转向操纵行为模型;采用模糊滑模理论设计机器人驾驶车辆的车速控制器;采用鲁棒反演理论设计机器人驾驶车辆的转向控制器;分别为车速控制和转向控制设计干扰观测器;设计将发动机驱动力控制转换为油门机械腿控制、制动力控制转换为制动机械腿控制、以及前轮转角控制转换为转向机械手控制的控制转换函数;设计用于协调控制机器人驾驶车辆车速与转向的策略。

    一种用于汽车试验的电磁驱动驾驶机器人

    公开(公告)号:CN105865805B

    公开(公告)日:2018-11-13

    申请号:CN201610288985.1

    申请日:2016-05-04

    Abstract: 本发明公开了一种用于汽车试验的电磁驱动驾驶机器人,包括机械手机箱、机械手、机械手控制机构、机械腿机箱、三条机械腿和三个机械腿控制机构;机械腿机箱顶部与机械手机箱底部固连,机械手通过机械手控制机构与机械手机箱连接,三条机械腿分别通过三个机械腿控制机构与机械腿机箱连接。在重复性高、持续时间长、安全性未能得到充分保障的汽车试验中,本发明可以完全代替人类驾驶员进行汽车试验,并且能够使得实验结果更加精确、客观。

    一种可快速安装的汽车驾驶机器人转向机械手

    公开(公告)号:CN107962575A

    公开(公告)日:2018-04-27

    申请号:CN201711310108.0

    申请日:2017-12-11

    CPC classification number: B25J11/00

    Abstract: 本发明提供进而一种可快速安装的汽车驾驶机器人转向机械手,包括基座、基座滑块、电机支架、电机固定板、转向伺服电机、行星减速器、花键轴、方向盘抓手、第一角度调节装置和第二角度调节装置。基座固定汽车驾驶室内,基座滑块安装在基座凹槽上,电机支架一端转动连接于基座滑块,另一端与电机固定板铰转动连接,其靠近中间部分与角度调节装置连接,转向伺服电机与行星减速器连接并一起固定在电机固定板上,花键轴无花键一端与行星减速器固连,另一端通过花键与方向盘抓手相连,方向盘抓手与方向盘连接,第一角度调节装置两端分别与电机固定板和电机支架铰接,第二角度调节装置两端分别与基座滑块和电机支架铰接。

    一种基于深度强化学习的换挡策略动态优化方法

    公开(公告)号:CN110716550B

    公开(公告)日:2022-07-22

    申请号:CN201911076016.X

    申请日:2019-11-06

    Abstract: 本发明属于工程机械及车辆工程领域,具体涉及一种基于深度强化学习的换挡策略动态优化方法。包括如下步骤:(1):确定换挡策略状态输入变量和动作输出变量;(2):根据状态输入变量和动作输出变量,确定换挡策略马尔科夫决策过程;(3):根据换挡策略目标建立强化学习换挡策略奖励函数;(4):根据马尔科夫决策过程和奖励函数,求解深度强化学习换挡策略;(5):将步骤(4)计算出的预测Q网络放入换挡策略控制器,工程机械及车辆在行驶过程中,工程机械及车辆根据换挡策略控制器选择挡位;(6):在行驶过程中定期更新预测Q网络。本发明通过深度强化学习方法对换挡策略进行更新,实现换挡策略的动态优化。

Patent Agency Ranking