一种基于深度强化学习的船舶配载方法和装置

    公开(公告)号:CN118332417A

    公开(公告)日:2024-07-12

    申请号:CN202410427181.X

    申请日:2024-04-10

    申请人: 浙江大学

    摘要: 本发明公开了一种基于深度强化学习的船舶配载方法,本发明通过退火遗传算法对历史配载数据进行操作得到大量的,较为准确的集装箱‑箱位映射关系,从而提供了大量的标签,同时将集装箱和箱位的空间信息和特征信息进行池化、卷积操作得到包含空间信息、特征信息和与其他集装箱相关联信息的嵌入向量,将该标签和嵌入向量作为训练样本,通过监督学习能够较好的训练出能够较为准确的预测集装箱‑箱位映射关系的演员网络,本发明还基于预测的集装箱‑箱位映射关系构建有向无环图,基于构建的有向无环图能够准确得到集装箱的配载顺序,综上两点本发明提供的方法能够在合理的时间内得到船舶配载问题的最优解,且复用性较高,本发明还公开了一种基于深度强化学习的船舶配载装置。

    一种基于时间分配和强化学习的交通信号灯控制方法

    公开(公告)号:CN110164150B

    公开(公告)日:2020-07-24

    申请号:CN201910496635.8

    申请日:2019-06-10

    申请人: 浙江大学

    IPC分类号: G08G1/08 G08G1/01

    摘要: 本发明公开了一种基于时间分配和强化学习的交通信号灯控制方法,包括:(1)配置仿真路口环境以及车流数据到交通模拟器,搭建智能体网络;(2)智能体网络根据路况状态产生下一信号周期的动作,并交由交通模拟器仿真一个信号周期;(3)把上一信号周期的经验存到重演缓存;(4)从重演缓存中采样经验训练智能体网络,并判断仿真的步数是否达到预设值,如果没有达到,则返回步骤(2),否则执行下一步;(5)重置交通模拟器并对智能体网络进行测试,完成测试后进行交通信号灯控制的应用。利用本发明,可以显著提升交通效率,能更容易地应用到实际道路上。

    一种基于时间分配和强化学习的交通信号灯控制方法

    公开(公告)号:CN110164150A

    公开(公告)日:2019-08-23

    申请号:CN201910496635.8

    申请日:2019-06-10

    申请人: 浙江大学

    IPC分类号: G08G1/08 G08G1/01

    摘要: 本发明公开了一种基于时间分配和强化学习的交通信号灯控制方法,包括:(1)配置仿真路口环境以及车流数据到交通模拟器,搭建智能体网络;(2)智能体网络根据路况状态产生下一信号周期的动作,并交由交通模拟器仿真一个信号周期;(3)把上一信号周期的经验存到重演缓存;(4)从重演缓存中采样经验训练智能体网络,并判断仿真的步数是否达到预设值,如果没有达到,则返回步骤(2),否则执行下一步;(5)重置交通模拟器并对智能体网络进行测试,完成测试后进行交通信号灯控制的应用。利用本发明,可以显著提升交通效率,能更容易地应用到实际道路上。

    一种基于关系网络的少样本图像分类方法

    公开(公告)号:CN113326892A

    公开(公告)日:2021-08-31

    申请号:CN202110691161.X

    申请日:2021-06-22

    申请人: 浙江大学

    IPC分类号: G06K9/62 G06N3/04 G06N3/08

    摘要: 本发明公开了一种基于关系网络的少样本图像分类方法,包括:(1)神经网络模型前向推导查询图像和支持图像的局部视觉特征表示;(2)构建双向附属关系网络挖掘查询图像和支持图像集中的局部特征的深层关联性;(3)根据关系网络的图网络中心性进行查询图像的分类概率预测;(4)使用带有标签的图像数据集进行少样本任务划分后训练神经网络模型(5)根据与支持图像集中各类之间的分类概率进行排序,选取最大分类概率的类作为该图像的类预测。利用本发明,可以使得少样本图像分类在训练过程中的局部特征的关联性得到充分挖掘,使得分类的结果更加准确。

    小型家用莲子去芯机
    8.
    实用新型

    公开(公告)号:CN202857787U

    公开(公告)日:2013-04-10

    申请号:CN201220382305.X

    申请日:2012-08-03

    IPC分类号: A23N4/12 A23N5/08

    摘要: 本实用新型涉及一种小型家用莲子去芯机,尤其是一种能够去除新鲜莲子的绿色外表皮和莲子内莲心的工具,其特征在于:还包括插尖、支撑插尖的部件、握柄、可拆卸的部分,插尖与支撑插尖的部件连接,支撑插尖的部件与握柄的顶部连接,可拆卸的部分设在握柄上,握柄上设有滑槽,刀片设在滑槽内,推动按钮与刀片的一端连接。本实用新型的有益效果是提高莲子去皮、去芯的效率,使用方便可靠,操作简单。