强化学习模型的训练方法、装置、电子设备及存储介质

    公开(公告)号:CN117993473A

    公开(公告)日:2024-05-07

    申请号:CN202410237664.3

    申请日:2024-03-01

    IPC分类号: G06N3/092

    摘要: 本申请提出一种强化学习模型的训练方法、装置、电子设备及存储介质,其中,方法包括:将第一时刻下的样本状态数据输入至PID控制器,由PID控制器输出样本第一动作;获取样本第一动作的样本奖励数据;对第一时刻下的样本状态数据、样本第一动作和样本第一动作的样本奖励数据进行关联,得到第一训练样本;将第一训练样本添加到智能体的强化学习模型的经验池;从经验池中筛选出目标训练样本,并基于目标训练样本,对强化学习模型进行训练。由此,可基于PID控制器生成第一训练样本,并将第一训练样本添加到经验池,以对强化学习模型进行训练,加快了强化学习模型的收敛速度,可自动生成大量的第一训练样本,提高了强化学习模型的鲁棒性。

    线束总成
    3.
    实用新型

    公开(公告)号:CN221633362U

    公开(公告)日:2024-08-30

    申请号:CN202322926355.0

    申请日:2023-10-30

    IPC分类号: H02G3/22 H02G3/04

    摘要: 本公开实施例提供一种线束总成,包括穿墙件和连接线束;穿墙件包括穿墙本体和固定配合件;穿墙本体的端部设置有与固定配合件连接的配合部;穿墙本体的中间区域设置有线束通孔;连接线束包括线束本体和设置在线束本体两端的线束接口;线束本体穿过线束通孔,并且设置在线束本体两端的线束接口分别位于线束通孔的两侧;穿墙件还包括填充线束通孔中缝隙的密封胶。采用密封胶填充线束通孔中的缝隙,使得线束通孔完全密封并实现线束本体相对于穿墙本体的固定,可以避免粉尘通过缝隙进入到设备舱,并避免线束本体在线束通孔内的磨损。

    双绞通信线束和线束总成

    公开(公告)号:CN221530325U

    公开(公告)日:2024-08-13

    申请号:CN202322923298.0

    申请日:2023-10-30

    IPC分类号: H01R13/40 H01R4/02 H01R31/06

    摘要: 本公开实施例提供一种双绞通信线束和线束总成,双绞通信线束包括双绞线束本体和线束接口;线束接口的防护外壳包括前端开口部、中间安装部、后端限位部和固定部;前端开口部形成开口腔;中间安装部设置有与开口腔连通的端子座安装孔;线束接口的端子座包括座本体、限位配合部、固定配合部和多个轴向弹性接线端子;座本体从防护外壳的后部插入到端子座安装孔内;座本体上的端子安装孔的延伸方向平行于端子座安装孔的延伸方向;各个轴向弹性接线端子分别固定于对应的端子安装孔中;双绞线束本体中的通信线缆与轴向弹性接线端子焊接连接。通过设置前述专门线束接口,实现双绞通信线束与对应外部设备接口的可靠连接,保证通信连接的可靠性。

    线束总成
    5.
    实用新型

    公开(公告)号:CN221633361U

    公开(公告)日:2024-08-30

    申请号:CN202322926281.0

    申请日:2023-10-30

    IPC分类号: H02G3/22 H02G3/04

    摘要: 本公开实施例提供一种线束总成,包括穿墙件和第一线束;穿墙件包括穿墙本体和固定配合件;穿墙本体和固定配合件配合,用于将线束总成固定在设备墙板的墙板孔处;穿墙本体的中间区域设置有线束通孔;第一线束包括主线束体、多条支线束体、第一线束接口和多个第二线束接口;各条支线束体均与主线束体的第一端连接;第一线束接口设置在主线束体的第二端;第二线束接口设置在对应的支线束体的自由端;主线束体穿过线束通孔。通过将多条支线束体与主线束体的第一端连接,仅将第一线束的主线束体穿过线束通孔,没有将各条与传感器连接的支线束体穿过线束通孔,可以避免过多与传感器连接的支线束体穿过线束通孔造成的通孔尺寸不足的问题。

    转子和轮辐式永磁电机
    6.
    实用新型

    公开(公告)号:CN220915016U

    公开(公告)日:2024-05-07

    申请号:CN202322538468.3

    申请日:2023-09-18

    IPC分类号: H02K1/276 H02K1/28 H02K21/14

    摘要: 本实用新型公开了一种转子和轮辐式永磁电机,转子包括转子铁芯和永磁体,永磁体和转子铁芯沿转子的周向依次交替布置;转子铁芯包括铁芯本体和辅助凸极,辅助凸极设置于铁芯本体的外侧,辅助凸极在转子的径向上的尺寸沿转子的周向先增加后减小,辅助凸极的外轮廓面在转子的周向的两端均延伸至铁芯本体的外周面;辅助凸极的外轮廓面在转子的端面的投影形成轮廓线,轮廓线为反余弦型曲线。本实用新型实施例的转子应用于轮辐式永磁电机时,可以降低该轮辐式永磁电机的齿槽转矩和气隙谐波,从而削弱轮辐式永磁电机输出的转矩脉动。