面向神经网络中非规则网络层的低功耗多精度计算电路设计

来源 :东南大学 | 被引量 : 0次 | 上传用户:qf1987227
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
卷积神经网络(Convolutional Neural Network,CNN)具有良好的鲁棒性和容错性,是深度学习(Deep Learning,DL)的重要分支,已广泛应用于图像识别、语音识别和文本处理等领域。由于卷积神经网络存在大量的乘累加运算且数据量大,对硬件功耗和访存带来巨大挑战,传统的硬件设计已无法满足终端设备的低功耗和高性能要求。针对CNN各层的算法特性,满足芯片设计的低功耗多精度需求,本文对基于数模混合的高能效卷积神经网络加速器进行研究。首先,通过对网络中空间复杂度的分析,提出基于剪枝量化处理的卷积神经网络设计。在网络训练过程中,依据各层中不同卷积核绝对值和的大小,通过与预定阈值比较,剪枝掉绝对值和较小的卷积核,对于绝对值和分布不均的卷积层,则可以修剪掉较多的小卷积核而保留高价值的卷积核,以保证网络的精度要求。对于网络中生成的激活值,通过量化操作降低中间数据的位宽。同时,针对卷积层的乘累加运算特点,采用深层可分离卷积运算将标准卷积运算分为深度卷积和逐点卷积两个过程,逐点卷积可看作1×1的卷积运算,并采用模拟乘法器实现。通常情况下,深层可分离卷积运算可以使网络计算量降低约9倍。之后,采用模拟方法实现非规则网络层的运算。基于模拟运算分别设计数模转换和模数转换电路,实现数字量与电压量的相互转换。最后设计系数可调模拟乘法器和模拟加法器实现卷积神经网络的部分乘加运算,采用模拟乘法器可以极大地降低系统功耗且精度损失仅0.57%。本文使用Cadence软件在TSMC28nm工艺下,对数模混合的卷积神经网络加速器进行仿真验证,本文所设计的加速器可以实现5bit~8bit数据位宽计算。结果表明,在主频为100MHz,电路工作在0.9V电压下,数据位宽为7bit时,峰值性能为10.8GOPS,功耗0.43mW,能效为25.1TOPS/W。与主流设计相比,能效提高了14倍。
其他文献
溶血磷脂酸(lysophosphatidic acid,LPA)是结构最简单的活性磷脂小分子,能够通过结合其特异性受体,引发特定的信号级联反应,从而涉及众多生物学行为,比如参与细胞增殖、迁移、凋亡等过程。而LPA的生成、受体表达和信号传导途径如果发生异常,可能会诱发某些疾病,甚至是有助于癌症的发生、发展和转移,但对于LPA调控肿瘤细胞DNA复制起始的研究还未见相关报道。本文研究发现,LPA能够诱导
本文首先从国外临床工程师发展经验展开调研,结合国内临床工程人员现状得出结论:制度的缺失是造成国内临床工程人员尴尬局面的首要原因。因此,建立健全临床工程师职业资格认证体
全球日益严重的环境问题迫使各大汽车厂商寻求新的可持续发展的解决方案,电动汽车应运而生。与集中式驱动的电动汽车不同,分布式驱动方式可以更好的发挥电动汽车的优势,其中,四轮边电机分布式驱动汽车性能最为突出。在保留传统汽车底盘主体结构的基础上,使用四台电机通过半轴分别驱动四个车轮,可以更好的提升车辆的动态性能。配上先进的电子控制技术,极大的增强了车辆的主动安全性和操控性能。本文以轮边电机分布式驱动车辆为
分布式驱动纯电动客车的驱动轮直接使用永磁同步电机驱动,驱动电机、减速机、驱动轮为一体化结构,省去中间的动力机械传递系统,有效提高了车辆的机械传递效率。永磁同步电机是分布式驱动纯电动客车的核心部件,采用直接转矩控制电机的控制方式。因两个驱动轮之间没有机械结构的联接,故可以根据控制算法分别控制每一个电机的驱动转矩,可有效解决车辆运行过程中的差速问题、驱动打滑问题、侧滑问题等,这些均可通过控制策略实现,
目的通过声触诊组织量化成像(virtual touch tissue imaging quantification,VTIQ)技术来测量血液透析患者甲状旁腺组织剪切波速度(shear wave velocity,SWV),以探讨VTIQ在继发性
目的比较高通量血液透析(high-flux hemodialysis,HFHD)与常规血液透析(hemodialysis,HD)联合血液透析滤过(hemodiafiltration,HDF)治疗尿毒症患者的生活质量评分。方法选择
黄厚江自1980年成为一名乡村教师以来,经过十八年的课堂磨练成长为一名特级教师,凭借二十余年的教研探索提出“共生阅读教学”的教学理念。他的成功来源于对课堂教学的坚持,
Crazy English:Teens reviews[回顾]the latest music DVD’s.These three DVD’s from Robbie Williams,Avril Lavigne and Linkin Park highlight[突出] the best in music
期刊
【摘要】在新课改背景下,教师需要一种既能满足以往教学经验又能与时俱进体现时代精神的教育理念的指引,为学生创设一种既能掌握数学知识技能,更能关注数学情感,经历数学实践和数学思维的课堂环境。这种课堂教学的转型,需要教师转变传统的课堂评价方式,探索新型的、适应新课程理念下的课堂评价。  【关键词】新课程理念 低年级数学 课堂评价  【中图分类号】G623.5 【文献标识码】A 【文章编号】2095-30
通过对实验教学示范中心管理模式和运行机制的研究与实践,阐述了如何对实验教学示范中心的管理模式和运行机制进行改革,更好的发挥示范中心的示范和辐射作用,加强学生的创新