卷积神经网络加速器的实现与优化

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:gzbfy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
卷积神经网络(CNN)已经被广泛应用于字符识别,图片分类和自然语言理解等领域。由于CNN中特定的计算方法,因此在通用处理器上效率不高,很难达到很高的性能。在实践中,图形处理器(GPU)被广泛应用于CNN的训练以及分类任务中,然而,它们受限于较低的能效收益。除了 GPU被应用于CNN以外,基于专用集成电路(ASCI)和现场可编程门阵列(FPGA)的CNN加速器也被提出。综合比较这些平台,基于FPGA的加速器因为具有可重构性高,开发周期短和能效收益高等优点,越来越受欢迎。但是,使用FPGA来加速CNN仍然存在很多挑战。众所周知,FPGA平台主要受限于有限的计算资源和昂贵的片外内存访问。然而,在最先进的CNN模型中,存在大量的计算操作(>1G)和大量的参数(>50M),这会消耗大量的能量。随着技术的发展,为了达到更高的精度,CNN模型会变得越来越大,越来越复杂,更将加剧这种情况。因此,需要设计一个高能效的CNN加速器。CNN中有多个卷积层,而在已有的加速器设计中,都使用单一的处理引擎来处理所有的卷积层,这种“一体适用”的方法会导致硬件资源利用率很低。针对这个问题,我们设计并实现了 PiPe。在PiPe工作的基础上,我们发现卷积层和全连接层的计算都可以转化成为矩阵乘法计算,这样就可以设计使用多个相同的处理引擎来计算卷积神经网络。基于这个发现,我们设计并实现了 UniCNN。具体来说,本文主要做了如下的工作:PiPe:采用流水线方式运行的高能效的卷积神经网络加速器。在该加速器中,包含多个处理引擎,每一个处理引擎对应卷积神经网络中—层的计算。所有的处理引擎都映射到同一个FPGA芯片上,这样不同的层能够以流水线的方式同时工作。除此之外,我们还使用了一种方法来平衡各个流水线阶段。对于访存密集型的全连接层,我们采用了剪枝和压缩存储的方法,同时还使用了批处理的方法来减少所需的内存带宽。作为实例研究,我们在两块FPGA开发板,Zedboard和Virtex-7,实现了 AlexNet模型。实验结果表明,与已有的CNN加速器相比,PiPe实现了更高的能效收益。UniCNN:采用统—的处理引擎计算卷积神经网络的加速器。在该加速器中,通过重排输入特征图的方法,将卷积层的计算转化为矩阵乘法计算;通过批处理的方法将全连接层的计算也转化为矩阵乘法计算;在此基础上,UniCNN采用了流水线计算的方法来优化整个的处理过程。实验结果表明,和已有的CNN加速器相比,UniCNN实现了更高的计算资源利用率。在PiPe和UniCNN的基础上,本文还对这两个加速器的编程模型进行了研究,使得用户能够更加方便地使用我们所提出的加速器来加速他们的应用。综上所述,本文提供了基于单块FPGA的高性能、低功耗、易用的卷积神经网络解决方案。
其他文献
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
自抗日战争时期中国共产党在根据地推行互助组至20世纪80年代初人民公社体制终结的特殊历史时期——集体化时代,是中国山区变动最为剧烈和深刻的时期。在此期间,建设什么样的
茶叶界又一颗巨星陨落了,庄晚芳先生过于匆遽地离开了我们。他虽未能如茶人所祝愿的那般攀登茶寿,却也达到了米寿高龄。我初识庄老,是在10年前接他参加茶博筹建的座谈会,我
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
时代飞速发展,我国教育事业也随之改革。在教育教学中,多媒体课件得到广泛应用,计算机教学中视频和音频是较为常见的内容,教师合理应用视频和音频,为学生提供良好的学习体验
随着游戏化学习研究的深入,化学课堂的传统教学模式也在发生变化。旨在全面提升化学核心素养的《普通高中化学课程标准(2017年版)》重点要求提高学生科学探究的能力。比较传
分析当前烟叶生产基础设施管护中存在的认识偏颇,以及权责利的关系界定不清、规范运行的机制不健全等问题及成因。提出应该坚持兴建与管护并重、理顺权责利归属、着力构建长
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
M42钢冶金质量与性能研究刘宇,邓玉昆,王瑞,罗迪,邢国华(大连钢厂,大连116031)(冶金部钢铁研究总院,北京100081)MetallurgicalQualityandPropertiesofSteelM42¥LiuYu;DengYukun;a...