一种异构多模态混合专家适配器
    1.
    发明公开

    公开(公告)号:CN118708381A

    公开(公告)日:2024-09-27

    申请号:CN202410844715.9

    申请日:2024-06-27

    摘要: 本发明提出了一种异构多模态混合专家适配器,将传统单一类型的多模态MoE架构转变为多种专家类型的组合。该适配器将每个专家的输入从单一模态扩展到多个模态,实现每个专家内部的跨模态交互。具体地,本发明引入了包括交叉注意力专家和通道注意力专家在内的异构专家结构,将不同模态的输入映射到低秩空间,在该空间中进行模态交互融合,再映射回原始维度,使可训练参数能够有效调整冻结预训练模型的梯度,充分利用不同模态间的协同交互。全局路由器为每组专家分配权重,局部组路由器控制每个专家的门控权重。该适配器可集成到多模态预训练模型的编码器层中,在下游任务上仅微调可训练参数,保持推理阶段参数量基本不变。

    一种纳米除磷剂、制备方法及应用

    公开(公告)号:CN107876000A

    公开(公告)日:2018-04-06

    申请号:CN201711037190.4

    申请日:2017-10-30

    申请人: 浙江大学

    摘要: 本发明提供了一种纳米除磷剂碳酸镧水合物La2(CO3)3·nH2O,其中1≤n≤8;本发明还提供了所述纳米除磷剂碳酸镧水合物的制备方法,包括步骤:(1)将离子液体加入到金属镧离子溶液中,搅拌形成混合溶液;(2)向上述混合溶液中加入沉淀剂进行沉淀反应,反应产物经后处理得到纳米除磷剂碳酸镧水合物。本发明制备的纳米尺度的除磷剂碳酸镧水合物,最大饱和吸附量在100mg/L以上,对生态水域、生活或工业废水中的低含量磷组分脱除能力强,处理后水样中磷酸盐含量可达到国家磷酸盐一级排放标准,对缓解目前日益增长的磷环境污染压力和日常生产生活用水问题具有重大的意义。

    一种轮足切换式全向移动机器人

    公开(公告)号:CN110371211A

    公开(公告)日:2019-10-25

    申请号:CN201910609646.2

    申请日:2019-07-08

    申请人: 浙江大学

    IPC分类号: B62D57/028

    摘要: 本发明公开了一种轮足切换式全向移动机器人,属于机器人技术领域,包括机器人主盘、设置在所述机器人主盘底部的六足步行机构和四轮移动机构,还包括用于控制所述六足步行机构和四轮移动机构工作的控制器。六足步行机构安装在机器人主盘上,可以全向行走;四轮移动机构是安装在六足步行机构上,通过六足步行机构的变形使四轮移动该机构处于四轮移动平台状态,四轮移动机构的变形方式可以使机器人朝向不同的方向,实现轮式全向移动。

    视听事件定位方法和系统
    5.
    发明公开

    公开(公告)号:CN113971776A

    公开(公告)日:2022-01-25

    申请号:CN202111202501.4

    申请日:2021-10-15

    申请人: 浙江大学

    摘要: 本发明公开了一种视听事件定位方法和系统,属于视听事件定位领域。为了更好地解决AVE任务中存在的音视频信息不一致的问题,本发明提出了一种新的时间级和事件级跨模态背景抑制网络,将音频和视频信息作为彼此的监控信号。此外,为了抑制一种模式中的低概率事件,本发明使用音频和视觉预测的CAS分数来实现;此外,为更好地从复杂的视频帧中提取关键的视觉区域特征,本发明设计了一个跨模态门控注意模块(CMGA)。本发明可高效完成完全监督和弱监督AVE任务及弱监督AVVB任务。