-
公开(公告)号:CN114139695B
公开(公告)日:2022-06-03
申请号:CN202210010882.4
申请日:2022-01-06
Applicant: 国网浙江省电力有限公司电力科学研究院
Abstract: 本发明公开了脉冲神经网络加速方法及脉冲神经网络的事件驱动加速器,属于脉冲神经网络加速技术领域。现有的脉冲神经网络加速器没有在控制方法层面优化脉冲神经网络计算过程,使得计算延迟高。传统时间驱动加速器不支持抑制性脉冲神经网络,限制其应用范围。本发明的一种脉冲神经网络加速方法,根据脉冲神经元模型以及脉冲编码方式,构建近似计算模型。该近似计算模型利用脉冲频域编码忽略脉冲序列时间语义这一特征,压缩脉冲信号在时间步上的分布,大幅降低脉冲路由过程以及后续神经计算过程。本发明的时间驱动加速器,重新规划脉冲神经网络计算过程,设置去重队列以及位示图解决脉冲抖动问题,实现对抑制型脉冲神经网络的高效支持。
-
公开(公告)号:CN116343009A
公开(公告)日:2023-06-27
申请号:CN202310329084.2
申请日:2023-03-28
Applicant: 国网浙江省电力有限公司电力科学研究院 , 中国科学技术大学苏州高等研究院 , 国网浙江省电力有限公司宁波供电公司
IPC: G06V10/82 , G06N3/0495 , G06N3/0464 , G06N3/045
Abstract: 本发明公开了三维神经网络处理方法及图像处理方法、系统和存储介质,属于神经网络以及图像处理技术领域。本发明的一种基于分块循环矩阵的三维神经网络处理方法,通过构建分块循环矩阵模型、计算加速模型、全频域模型,克服以往剪枝等模型压缩方法存在的访存、计算不规则等问题,提出使用分块循环矩阵对三维神经网络3D CNN进行压缩,并且进一步利用快速傅立叶变换FFT加速计算,在保持模型结构规则的前提下,取得了显著的存储和计算压缩效果。在此基础上,引入频域内的激活、批归一化和池化操作,进一步消除由于快速傅立叶变换FFT带来的频繁的时域/频域切换开销,从而实现了全频域计算,进一步降低了3D CNN模型推理时的计算开销。
-
公开(公告)号:CN116663629A
公开(公告)日:2023-08-29
申请号:CN202310782272.0
申请日:2023-06-29
Applicant: 国网浙江省电力有限公司电力科学研究院 , 中国科学技术大学苏州高等研究院
IPC: G06N3/063 , G06N3/0464
Abstract: 本发明公开了一种促进神经网络加速计算的方法,涉及神经网络技术领域,用于解决现有神经网络计算分配时特征不匹配的问题,该方法包括以下步骤:获取神经网络运行参数;根据所述运行参数,计算神经网络各层仿存比;根据访存比计算结果对所述神经网络进行分组,将访存比差值在预设区间内的层分入同组;将分入同组的层分配给同一处理引擎。本发明还公开了一种神经网络计算加速装置及电子设备。本发明通过访存比对神经网络层进行分组,并匹配合适的处理引擎,使得神经网络计算分配时特征匹配,性能优。
-
公开(公告)号:CN114139695A
公开(公告)日:2022-03-04
申请号:CN202210010882.4
申请日:2022-01-06
Applicant: 国网浙江省电力有限公司电力科学研究院
Abstract: 本发明公开了脉冲神经网络加速方法及脉冲神经网络的事件驱动加速器,属于脉冲神经网络加速技术领域。现有的脉冲神经网络加速器没有在控制方法层面优化脉冲神经网络计算过程,使得计算延迟高。传统时间驱动加速器不支持抑制性脉冲神经网络,限制其应用范围。本发明的一种脉冲神经网络加速方法,根据脉冲神经元模型以及脉冲编码方式,构建近似计算模型。该近似计算模型利用脉冲频域编码忽略脉冲序列时间语义这一特征,压缩脉冲信号在时间步上的分布,大幅降低脉冲路由过程以及后续神经计算过程。本发明的时间驱动加速器,重新规划脉冲神经网络计算过程,设置去重队列以及位示图解决脉冲抖动问题,实现对抑制型脉冲神经网络的高效支持。
-
-
-