基于FPGA的卷积神经网络并行结构研究

被引量 : 0次 | 上传用户:BLGKLING
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着集成电路设计和制造工艺的进步,具有高速、高密度可编程逻辑资源的现场可编程门阵列(Field Programmable Gate Array,FPGA)得到了快速发展,单芯片的集成度越来越高。当前主流的FPGA芯片中包含了大量的可编程逻辑资源、可编程互联资源、存储资源,并通过集成DSP硬核支持高性能乘法部件的实现,这些特点使得FPGA成为实现计算密集型应用加速的一种非常重要的选择。在众多的计算密集型应用中,卷积神经网络(Convolutional Neural Network, CNN)作为典型的多层神经网络始终处于研究的核心地位,对其进行深入的研究,在模式识别、科学计算等领域具有重要的理论意义和应用价值。卷积神经网络的并行体系结构是CNN整体计算架构的基础和核心。本文在现有工作的基础上,系统地研究了卷积神经网络并行结构,主要的研究内容包括以下几个方面:卷积神经网络的计算具有多种并行特征,如何根据不同的并行计算特征设计相应的并行结构,充分开发和利用CNN计算的并行性是卷积神经网络并行计算的一个关键问题。本文基于“主机+FPGA”的计算架构,确定卷积神经网络并行计算单元在整个CNN计算架构中的地位以及与其他部件的接口,设计了一种可配置的CNN计算单元并行结构,该结构采用交叉互联开关控制输入和输出特征映射图与CNN计算单元的连接。应用示例表明该结构能够根据卷积神经网络层内计算的不同特征配置相应的计算结构,有利于充分开发卷积神经网络层内计算的并行性,提高卷积神经网络计算性能。由于FPGA硬件资源的限制,完全并行的CNN计算结构无法在FPGA上实现,只能对部分卷积核进行并行计算,如何把大量的卷积核循环语句映射到数量有限的计算单元仍然是一个需要解决的问题。通过给出CNN层内计算模型的循环表示,然后根据不同的并行计算结构对层内计算进行划分,实现对多个循环迭代的卷积核循环语句调度执行;通过给出不同划分方法的代价函数,能够在资源约束的条件下,获取不同并行计算结构的执行性能,进而为卷积神经网络并行计算结构的选择提供全面和精确的信息。卷积核计算单元的执行效率在很大程度上决定着整个卷积神经网络的性能,其中数据缓存结构的设计是二维卷积计算单元设计中的一个关键问题,缓存结构设计的优劣决定着卷积计算单元的硬件实现代价和性能。现有的二维卷积计算单元的内部缓存结构在实际应用中存在各种不足。本文针对如何提高片上存储资源使用效率的问题,提出了一种存储面积优化的数据缓存结构,采用寄存器轮转策略充分开发卷积计算中的数据重用,实验结果表明该结构提高了对片外存储器带宽和片上存储资源的利用率;针对如何在存储带宽受限条件下,充分开发卷积计算内在并行性和提高输出数据吞吐率的问题,提出了带宽优化的数据缓存结构,该结构通过采用固定带宽的数据广播策略和单数据流驱动的流水线方式,充分利用了片上移位寄存器资源,实验结果表明该结构在满足输出数据吞吐率最大化的条件下,减少了对片外存储带宽的需求。如何确定卷积神经网络应用不同层中特征映射图的数量是卷积神经网络拓扑结构设计中的一个关键问题,本文在对现有卷积神经网络应用拓扑结构研究的基础上对CNN各层特征映射图数量进行设计空间探索,设计了特征映射图数量可配置的卷积神经网络应用C模型,并在NetBatch分布式计算平台进行训练和测试。实验结果表明,该方法能够确定一类卷积神经网络应用不同层特征映射图数量的边界值,为卷积神经网络应用寄存器传输级(Register Transfer Level,RTL)设计提供较为精确的拓扑结构信息。
其他文献
目的采用腹腔镜治疗直肠癌的临床效果研究。方法对我院2010年至2014年前来就诊的115例直肠癌患者,其中55例患者进行了腹腔镜直肠癌根治术,另外60例患者采取了开腹直肠癌根治
随着社会经济的发展,实施30多年的计划生育政策需要新的变革与调整,需要检视与反思当下我国放开"单独二胎"人口政策的理论逻辑与实践动因。
语法在英语教学中起到了巨大作用,它作为语言的内在规律在小学英语教学中得以教授。在传统的英语教学中,所谓的填鸭式教学使学生失去了学习英语的兴趣,养成了学生消极的英语
现代企业物资管理中存在着不少问题,新时期经济转型背景下,企业物资管理要从认知、人员、制度等多方面入手进行改革,提升管理水平与质量。本文分析了企业物资管理问题,并就加
马克思以实践为基础的主体性理论思想,充分肯定了人的主体地位,论证了人的主体性是自主性、自为性、选择性、创造性的统一。这对在高校和谐校园文化建设中激发和发挥广大教职
目的探讨在晚期肿瘤病人护理中融入临终关怀理念干预的临床价值。方法将2012年1月至2015年1月到我院治疗的56例晚期肿瘤病例纳入研究,通过随机对照法将病例均分成两组,对照组
目的:通过本课题的研究,更加深入的认识拔罐治疗小儿哮喘的疗效,探索拔罐治疗哮喘作用机理,从而为临床提供更有效的治疗方案。方法:根据病情、症状、体征及相关理化检查等,在我院门
分娩动因方面的研究取得了许多新的进展,主要的观点是将子宫颈与子宫体相互协调作用才能维持妊娠的继续和分娩发动,并将子宫颈当作一个功能性器官来研究,这个观点被认为是生
杜甫的《登高》,被认为是"古今七律第一",历代评论家都从章法、句法、字法、思想内容等方面给予了高度评价。本文从景和情的关系角度,对此诗展开分析,借以体味杜诗的苍凉悲壮
现代潜艇隐身是一个综合概念,可分为声隐身、热隐身、光隐身、战术隐身等方面。文中对现代主要潜艇隐身技术进行了分析,在此基础上概括总结出加快潜艇隐身发展和提高潜艇隐身