一种基于深度强化学习的伦理驱动多模态决策方法

    公开(公告)号:CN116901999A

    公开(公告)日:2023-10-20

    申请号:CN202310874379.8

    申请日:2023-07-17

    Abstract: 本发明公开了一种基于深度强化学习的伦理驱动多模态决策方法,包括:获取车辆拍摄图像,基于所述车辆拍摄图像和感知模型获取周围环境形态特征和动态特征;构建多模态神经网络,将人类伦理反馈的伦理系数引入至所述多模态神经网络中进行训练后对所述周围环境形态特征和动态特征进行计算,获得相应动作的Q值;基于强化学习算法将所述相应动作的Q值进行计算,获得对应动作,基于所述对应动作对车辆进行决策。本发明采用在环境中观测到的物体形态特征与通过车载传感器获取车辆相对状态的动态特征作为模型输入,并基于此提出了伦理驱动的多模态神经网络统一提取两种形态特征,可以提升整体状态信息的准确性和鲁棒性。

    一种基于图神经网络强化学习的无人公交集群决策方法

    公开(公告)号:CN115731690A

    公开(公告)日:2023-03-03

    申请号:CN202211443954.0

    申请日:2022-11-18

    Abstract: 本发明公开了一种基于图神经网络强化学习的无人公交集群决策方法,本发明属于无人驾驶汽车领域,包括:S1获取无人驾驶公交的当前场景,将场景编码为图结构,获得第一状态;S2基于第一状态得到特征矩阵、邻接矩阵和掩码矩阵;S3将特征矩阵与邻接矩阵输入当前网络,通过掩码矩阵过滤后输出每辆无人驾驶公交的动作,根据内部动态奖励函数和能量消耗模型得到当前网络奖励值,产生第二状态,得到一个四元组;S4基于第二状态,执行S2‑S3,输出第二状态对用动作,得到对应奖励值,再次获得新的状态,循环执行S2‑S3;S5基于四元组,利用反向传播训练网络,更新网络参数。本发明综合考虑多种任务的完成、效率的提升、能量的节约与乘客的舒适性。

    一种用于混合交通环境行为决策的模块化图强化学习系统

    公开(公告)号:CN115688861A

    公开(公告)日:2023-02-03

    申请号:CN202211337217.2

    申请日:2022-10-28

    Abstract: 本发明涉及一种用于混合交通环境行为决策的模块化图强化学习系统,包括:混合交通环境模块:用于提供混合交通运行环境,并将环境状态发送至图表征模块;图表征模块:用于通过环境状态生成节点特征矩阵和邻接矩阵;图强化学习模块:用于接收节点特征矩阵和邻接矩阵,并进行处理,生成驾驶策略;合作驾驶行为模块:基于驾驶策略生成驾驶行为和控制指令,控制车辆运行。本发明系统可以根据需要对各个主要模块,即混合交通环境模块、图表征模块、图强化学习模块中的图神经网络单元和深度强化学习单元,以及合作驾驶行为模块,进行替换、改进和二次开发。

    一种适用于网真应用的基于可重构巨型星座的路由方法

    公开(公告)号:CN115333602A

    公开(公告)日:2022-11-11

    申请号:CN202210828809.8

    申请日:2022-07-14

    Abstract: 本发明公开的一种适用于网真应用的基于可重构巨型星座的路由方法,属于通信领域。本发明通过利用永久或临时的激光卫星间链路,实现一种可重构的巨型星座架构,相比传统固定的巨型星座架构,有着更灵活多变的路由路线,能够有效减少拥塞,提高传输效率;基于可重构巨型星座,采用混合整数线性规划,实现一个完整的路由系统,相比于传统固定巨型星座加最短路径路由算法,极大的降低最大链路的利用率,能够有效平衡全局负载,提高数据流的传输速率。本发明适用于通信领域,基于可重构巨型星座新型路由方法,实现均衡、高效地传输海量网真应用可视化数据流,减少拥塞,提高传输速率。

    一种可重构模块化机动性越野无人运输平台

    公开(公告)号:CN115180048A

    公开(公告)日:2022-10-14

    申请号:CN202210930819.2

    申请日:2022-08-04

    Abstract: 本发明公开一种可重构模块化机动性越野无人运输平台,包括运输平台主体,所述运输平台主体包括若干可重构运输板材,相邻所述运输板材之间可拆卸连接,所述运输平台主体底部设置有若干驱动平台,每个所述驱动平台与所述运输平台主体之间分别固定连接有多自由度连接机构。本发明结构简单,操作便捷,能够在根据工作空间进行调整,在保证正常通行的前提下保证了运输能力,对工作环境适应能力强。

Patent Agency Ranking