基于深度强化学习的实时分布式无线网络调度方法和系统

    公开(公告)号:CN114173418A

    公开(公告)日:2022-03-11

    申请号:CN202111327838.8

    申请日:2021-11-10

    Abstract: 本发明提出一种基于深度强化学习的实时分布式无线网络调度方法和系统,包括:获取由多个接入点和用户节点组成的无线网络;在测试阶段的每个时隙,接入点根据部分数据流对应的发送队列信息,得到各数据流的状态,同时获取之前对无线信道的历史观测信息将数据流的状态和历史观测信息输入至决策模型,接入点执行决策模型输出结果对应的调度决策;在训练阶段,网络中存在的全局决策模型获取所有数据流的状态信息,并给出每个接入点的最优决策动作,接入点执行专家网络给出的最优决策动作,同时将部分数据流的状态,信道的历史观测信息,最优调度决策动作作为交互信息存储至各自的经验回放池中,从各自的经验回放池中抽取经验,训练更新当前决策模型。

    电路布线方法、DDR4内存电路及电子设备

    公开(公告)号:CN111586969B

    公开(公告)日:2021-12-21

    申请号:CN202010350952.1

    申请日:2020-04-28

    Abstract: 本发明提出一种电路布线方法,包括:于PCB基板的第一面规则设置多个元件颗粒,并于该PCB基板的第二面对应设置该元件颗粒,使该第二面的元件颗粒与该第一面的元件颗粒互为镜像;于该PCB基板设置端接电阻,以及与处理器连接的处理器端;于该PCB基板设置主线和分支线,通过该主线将该处理器端与该端接电阻电性连接,通过该分支线将所有该元件颗粒分别依次电性连接至该主线;于该PCB基板设置数据线,通过该数据线将该处理器端与该元件颗粒电性连接。本发明还提出一种采用该电路布线方法进行电路布线的DDR4内存,以及一种包括该DDR4内存的电子设备。

    一种用于压缩深度神经网络模型的方法和系统

    公开(公告)号:CN112906889A

    公开(公告)日:2021-06-04

    申请号:CN202110234699.8

    申请日:2021-03-03

    Abstract: 本发明实施例提供了一种用于压缩深度神经网络模型的方法和系统,该方法包括:S1、获取基线模型,所述基线模型是待压缩的深度神经网络模型;S2、对所述基线模型的至少部分卷积层中的多个卷积核分别基于其权重参数计算其有效性,确定无效的卷积核;S3、从所述基线模型中裁剪掉所确定的无效的卷积核;S4、对经裁剪后的模型进行微调或者重训练,得到压缩后的模型。本发明在对相应的卷积层进行剪枝的过程中,不用去分析该层的剪枝结果对灵敏度的影响,只关注最终的结果是否可以接受,因此本发明的方法更加简单,效率更高,尤其适合具有较多卷积层的深度卷积神经网络。

    一种轨迹识别模型训练方法及轨迹识别方法

    公开(公告)号:CN112766339A

    公开(公告)日:2021-05-07

    申请号:CN202110029664.0

    申请日:2021-01-11

    Abstract: 本发明提供一种轨迹识别模型训练方法及轨迹识别方法。本发明的模型训练方法包括:S1、通过构建基于独热编码向量的语料对的方式将目标轨迹数据编码为轨迹语义向量;S2、构建用于对轨迹语义向量进行评估的循环神经网络和用于对评估结果进行分类的分类器;S3、利用标记轨迹数据对所述循环神经网络和分类器进行训练。本发明的轨迹识别方法中,采用了新的轨迹语义向量计算方法,该方法可以将不定长的轨迹段投影到定长的向量空间中。通过采用本发明的模型训练方法可以使得网络学习到不同类别的轨迹特征,通过循环神经网络识别轨迹类别。

    一种基于深度强化学习的智能网络编码方法和设备

    公开(公告)号:CN112564712A

    公开(公告)日:2021-03-26

    申请号:CN202011344089.5

    申请日:2020-11-26

    Abstract: 本发明提供一种基于深度强化学习的网络编码方法,所述方法包括:源节点将要发送的信息划分成K个片,根据源节点编码模型确定每个片的编码系数,生成并向下一跳节点发送编码包;中间节点接收前一节点发送的编码包,将收到的编码包再次编码,根据中间节点编码模型确定编码系数,生成并向下一跳节点发送编码包,其中所述源节点和中间节点编码模型通过对DQN网络训练得到。本发明可以根据网络动态变化来自适应地调节编码系数,改善解码效率,并具备良好的模型泛化能力,能泛化于具有不同网络规模和不同链路质量下的网络,本发明分别在源节点和中间节点上分布式执行的各自的编码系数优化模型,简化了编码系数优化实施并且改善了DQN训练的稳定性。

    无人系统网络智能跨层数据传输方法及系统

    公开(公告)号:CN110519020B

    公开(公告)日:2020-09-11

    申请号:CN201910744399.7

    申请日:2019-08-13

    Abstract: 本发明提出一种无人系统网络智能跨层数据传输方法及系统,包括在路由层采用上限置信区间作为节点选择转发节点的搜索策略;采用双Q学习技术解决由于Q值过高估计导致行为选择评价不准确的问题;回报值的计算综合考虑MAC延时,链路错误概率与位置误差,使其更能反映动作的效益;根据节点速度与MAC延时,为每条链路赋予不同的学习率与折扣因子,实现学习率与折扣因子的自适应调节。最后结合MAC层与路由层,利用MAC延时参数共享实现跨层优化,提出一个无人系统网络智能跨层数据传输方法和系统。

    电路布线方法、DDR4内存电路及电子设备

    公开(公告)号:CN111586969A

    公开(公告)日:2020-08-25

    申请号:CN202010350952.1

    申请日:2020-04-28

    Abstract: 本发明提出一种电路布线方法,包括:于PCB基板的第一面规则设置多个元件颗粒,并于该PCB基板的第二面对应设置该元件颗粒,使该第二面的元件颗粒与该第一面的元件颗粒互为镜像;于该PCB基板设置端接电阻,以及与处理器连接的处理器端;于该PCB基板设置主线和分支线,通过该主线将该处理器端与该端接电阻电性连接,通过该分支线将所有该元件颗粒分别依次电性连接至该主线;于该PCB基板设置数据线,通过该数据线将该处理器端与该元件颗粒电性连接。本发明还提出一种采用该电路布线方法进行电路布线的DDR4内存,以及一种包括该DDR4内存的电子设备。

    一种用于训练轨迹预测模型的方法和轨迹预测方法

    公开(公告)号:CN111488984A

    公开(公告)日:2020-08-04

    申请号:CN202010259417.5

    申请日:2020-04-03

    Abstract: 本发明实施例提供了一种轨迹预测方法,包括根据用户的实时轨迹数据,使用经用于训练轨迹预测模型的方法得到的轨迹预测模型进行轨迹预测,得到轨迹预测结果,本发明将时空轨迹数据分为近期轨迹数据、短期历史数据和长期历史数据,利用第一多头注意力机制网络的编码模型捕捉长期历史数据中各轨迹点的长期时空关系,利用循环神经网络编码模型捕捉短期历史数据中各轨迹点的短期时空关系,并利用第二多头注意力机制网络的编码模型根据长期和短期时空关系的相似度对短期时空关系进行调整,实现了历史轨迹的全局依赖,用近期轨迹数据和经调整后的短期时空关系训练第三多头注意力机制网络的解码模型后将其作为轨迹预测模型,提高了轨迹预测的准确性。

Patent Agency Ranking