一种基于增强深度强化学习的车联网分布式边缘计算方法

    公开(公告)号:CN118827674A

    公开(公告)日:2024-10-22

    申请号:CN202410774868.0

    申请日:2024-06-17

    摘要: 本发明公开了一种基于增强深度强化学习的车联网分布式边缘计算方法,具体为:首先建立基于分布式云计算网络的计算卸载系统,将其中来自车辆的计算任务由分布式系统中的多个边缘计算资源单元(ECRU)处理;然后将计算卸载资源的优化问题建模为马尔可夫决策过程(MDP),同时考虑了系统收入、成本支出和系统中的其他领域;最后采用增强型深度Q学习方法来解决优化问题。本发明可以有效地实现快速收敛速度和高收敛稳定性,并具有最高的性能。

    一种用于无人机视觉传感装置的实时交通检测方法

    公开(公告)号:CN117557923B

    公开(公告)日:2024-10-22

    申请号:CN202311542873.0

    申请日:2023-11-20

    摘要: 本发明公开了一种用于无人机视觉传感装置的实时交通检测方法,具体为:无人机采集航拍图像,预处理后分为训练集和测试集;通过高效的基于分割与洗牌的特征提取网络SCSNet,用来提取无人机航拍图像的特征信息;利用结合了多感受野特征和注意力机制的分组局部注意力卷积GLAConv,帮助大量特征信息生成更丰富的多尺度表示,并抑制背景信息的干扰;在预测阶段生成类概率图和一系列置信度得分的边界框,然后用非极大值抑制NMS过滤掉置信度得分较低的边界框,其余带有类别标签的边界框为最终的检测结果。本发明指导无人机实时交通目标检测任务,在实时性和准确性之间取得了很好的平衡;同时减少了计算量和提高了学习效率。

    基于深度强化学习的车队网络内计算卸载与功率分配方法

    公开(公告)号:CN117641287A

    公开(公告)日:2024-03-01

    申请号:CN202311370976.3

    申请日:2023-10-23

    摘要: 本发明公开了一种基于深度强化学习的车队网络内计算卸载与功率分配方法,具体为:以最小化车队系统平均能耗和任务数据处理延迟为目标,建立车队系统的计算模型;根据基于多智能体DRL的方法,将车队网络视为一个环境,将每个PM视为可以与动态环境交互的智能体;每个智能体追求的目标是最大化长期折扣奖励;在学习过程中,智能体基于状态做出的决策是由奖励驱动的,进行计算卸载和功率分配联合优化。本发明提出的车队网络中计算卸载和功率分配优化模型综合考虑了车辆的移动性、通信干扰以及车辆协作;能够适应快速移动的车队网络环境;能够捕获环境状态的时序特征,能做出更加准确的功率分配动作。

    基于车载OBU的多源数据融合方法和车载OBU

    公开(公告)号:CN115204314B

    公开(公告)日:2023-05-30

    申请号:CN202210968334.2

    申请日:2022-08-12

    摘要: 本发明公开了一种基于车载OBU的多源数据融合方法和车载OBU,方法包括:S1:获取车载OBU的相关传感数据;S2:根据所述车载OBU的相关传感数据,得到联系度矩阵;S3:对所述联系度矩阵进行扩维处理,得到扩维后的联系度矩阵;S4:根据所述联系度矩阵和所述扩维后的联系度矩阵,得到不同时刻下的一致性测度;S5:根据所述不同时刻下的一致性测度,得到一致性测度均值和一致性方差;S6:根据所述一致性测度均值和所述一致性方差,得到加权系数;S7:对所述加权系数进行归一化处理,得到归一化处理结果;S8:根据所述归一化处理结果、所述一致性测度均值和所述一致性方差,得到数据融合结果。

    一种适用于网络编码传输控制协议的补偿重传方法

    公开(公告)号:CN107566083B

    公开(公告)日:2020-05-15

    申请号:CN201710588546.7

    申请日:2017-07-19

    IPC分类号: H04L1/00 H04L1/16 H04L1/18

    摘要: 本发明公开了一种适用于网络编码传输控制协议的补偿重传方法,包括:发送端对编码报文进行编号,在编码报文头部附有编号字段Pid;发送端记录每个编码报文是由哪几个原始报文组成的,接收端对于收到的每个编码报文都需要回复确认应答ACK报文,在回复的ACK报文中附有字段Pid‑reply;发送端根据Pid‑reply、网络编码层确认序号和组成编码包的原始数据包信息,间接获知接收端译码矩阵信息;发送端根据接收端译码矩阵信息决定重传哪些数据;发送端每收到ACK报文就启动补偿重传方法。本发明通过网络编码层头部的Pid和Pid‑reply字段获知接收端译码矩阵的信息,在合适的时机补偿重传若干数据包,以加快译码矩阵的译码进程,减少报文的传输时延。

    一种适用于网络编码传输控制协议的补偿重传方法

    公开(公告)号:CN107566083A

    公开(公告)日:2018-01-09

    申请号:CN201710588546.7

    申请日:2017-07-19

    IPC分类号: H04L1/00 H04L1/16 H04L1/18

    摘要: 本发明公开了一种适用于网络编码传输控制协议的补偿重传方法,包括:发送端对编码报文进行编号,在编码报文头部附有编号字段Pid;发送端记录每个编码报文是由哪几个原始报文组成的,接收端对于收到的每个编码报文都需要回复确认应答ACK报文,在回复的ACK报文中附有字段Pid-reply;发送端根据Pid-reply、网络编码层确认序号和组成编码包的原始数据包信息,间接获知接收端译码矩阵信息;发送端根据接收端译码矩阵信息决定重传哪些数据;发送端每收到ACK报文就启动补偿重传方法。本发明通过网络编码层头部的Pid和Pid-reply字段获知接收端译码矩阵的信息,在合适的时机补偿重传若干数据包,以加快译码矩阵的译码进程,减少报文的传输时延。

    一种自适应端到端网络编码传输方法

    公开(公告)号:CN107508655A

    公开(公告)日:2017-12-22

    申请号:CN201710588600.8

    申请日:2017-07-19

    IPC分类号: H04L1/00 H04L1/16 H04W28/06

    摘要: 本发明公开了一种自适应端到端网络编码传输方法,主要包括:在网络编码层,维持这一个缓存TCP层原始数据报文的发送队列,在发送报文时,编码窗口长度固定为N,其可根据新的需要发送的数据报文的到达有序的向后滑动;在网络编码层通过冗余编码来实现对抗网络拥塞丢包;在接收端维持三个译码相关的队列实现对于不同数据报文的处理,乱序的或者对将来数据报文译码有价值的报文缓存在待处理数据报文队列中,等待网络编码层处理,对当前译码有价值的数据报文缓存在正在译码的报文队列中,已经译码的报文缓存在被译码数据报文队列中,等待上传给TCP层或者等待TCP层接收确认。本发明能够保证良好的传输速率,也能提高带宽利用率。

    无人机辅助的车队数字孪生资源分配和车队控制优化方法

    公开(公告)号:CN118803650A

    公开(公告)日:2024-10-18

    申请号:CN202410767502.0

    申请日:2024-06-14

    摘要: 本发明公开了一种无人机辅助的车队数字孪生资源分配和车队控制优化方法,具体为:建立一个由车队物理系统PPS、无人机和车队数字孪生PDT组成的网络模型,考虑车辆和无人机动态数据,引入信息年龄AoI模型,通过联合优化车队系统的传输功率和计算功率分配,以PDT的平均峰值AoI与长期平均能耗的加权和最小化建立目标模型;将动态资源优化问题表述为马尔可夫决策过程MDP模型,基于DDPG算法和Dirichlet分布的D3PGRA方法优化求解。本发明考虑了数字孪生地同步时延和车队地控制,可以同时优化车队数字孪生的信息年龄和车队的控制策略,能有效解决车队功率分配和车队控制联合优化问题。

    一种适用于网络编码传输控制协议的前向重传方法

    公开(公告)号:CN107592185B

    公开(公告)日:2020-03-20

    申请号:CN201710588569.8

    申请日:2017-07-19

    IPC分类号: H04L1/16 H04L1/18

    摘要: 本发明提供了一种适用于网络编码传输控制协议的前向重传方法,包括:发送端对编码报文进行编号,在编码报文头部附有编号字段Pid;发送端记录每个编码报文是由哪几个原始报文组成,接收端对于收到的每个编码报文都需要回复ACK报文,在回复的确认报文中附有字段Pid‑reply;发送端根据Pid‑reply、网络编码层确认序号和组成编码包的原始数据包信息间接获知链路丢失的报文,并维护一个重传报文的链表;发送端的网络编码层在收到上层TCP传下来的重传报文时,启动前向重传机制,对重传链表的报文进行重传。本发明让基于网络编码传输控制协议协议能在一个往返时延内重传所有丢失报文,有助于提高基于网络编码传输控制协议的传输吞吐率。

    基于网络编码的传输控制协议的编译码方法

    公开(公告)号:CN107547436A

    公开(公告)日:2018-01-05

    申请号:CN201710588547.1

    申请日:2017-07-19

    IPC分类号: H04L12/823 H04L12/835

    摘要: 本发明公开了一种基于网络编码的传输控制协议的编译码方法,本方法在网络编码层优化了编码方法,区分了正常数据包还是冗余包,对不同类型的数据报文,采用不同的编码方式,对于正常的编码数据包采用直接异或的方式实现编码;对于冗余数据报文,其编码系数随机选取自范德蒙矩阵中的某一行,然后根据编码系数利用线性编码方法获得冗余编码数据包,降低编码复杂度;在网络层优化编码数据包头部的设计,全面考虑了编码系数和译码所需的参数,缩短了编码头部开销,提高了传输效率;在网络编码层优化了译码算法,使得高斯消元过程更加简单,从而降低了译码复杂度。