基于FPGA的视觉语义分割网络加速研究

来源 :北京交通大学 | 被引量 : 2次 | 上传用户:ruanmm2588
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着深度学习技术的快速发展,以语义分割网络为代表的视觉语义分割已广泛应用于智能机器人、安防和自动驾驶等许多领域。但是,语义分割网络对硬件平台的计算资源和可编程性有很高的要求。基于FPGA(现场可编程逻辑门阵列)的硬件系统不仅具有灵活的可编程性和较高的可嵌入性,还可以满足较低的功耗要求,故成为实现终端语义分割的良好解决方案。而在硬件加速方面,已有的神经网络FPGA加速器更多地关注经典分类网络的实现和优化,但针对包含解码器结构的语义分割网络的研究工作相对较少。考虑到两者在网络架构上的差异,研究针对语义分割网络的FPGA加速技术对于实现终端语义分割十分重要。本文以经典语义分割网络Seg Net为例,研究了基于FPGA的语义分割网络加速技术,设计了一种能够实现网络推理过程的FPGA硬件加速器。本文的主要贡献在于:(1)针对Seg Net,研究和设计了算法流程简化技术,包括合并卷积与批归一化操作以及采用相对池化索引地址等,从而降低了算法流程复杂度,减少了75%的池化索引存储消耗。设计了静态+动态定点数的定点量化策略,相较采用32位浮点数的Caffe网络推理过程,在采用8位动态+静态定点数量化策略下全局准确率(global accuracy)、类准确率(class accuracy)和平均交并比(m Io U)的精度损失分别为3.82%、6.30%和4.78%。根据不同的数据空间特点设计了相应的并行化数据结构方案,使得系统吞吐率按设计并行度成倍提升。(2)采用Open CL(开放运算语言)开发流程,设计了基于并行计算的卷积内核和基于高效流水线的池化、反池化内核,并通过可配置的数据管道实现了不同模式的层级连接,从而实现网络的片上加速;根据并行化数据结构,设计了基于数据分组的片外-片上数据访存方案,并通过设计空间探索平衡系统吞吐率和硬件资源利用率。(3)在Intel Arria-10 GX1150 FPGA开发平台上进行了硬件实现和评估。结果显示在输入RGB图像分辨率为224×224时,本文设计的加速器实现了高于432.8GOP/s的吞吐量和21.64 GOP/s/W的能效比。
其他文献
本报告基于译者为一位美国游客口译四川博物院中文讲解词的实践经历而写成。参观过程中,讲解员主要对青铜器馆、汉代陶石馆和工艺美术馆三个常设展览进行了介绍。本次口译任务以交替传译的方式进行。基于现场录音的转录文本,译者总结出这份讲解词的三个特征:知识性、通俗性和口语性。然后,译者对释意理论进行了介绍,并分析了该理论在口译实例中的指导意义。释意理论提出,翻译的程序模式是理解、脱离语言外壳和再表达。该理论的
党的十八大以来,党中央把脱贫攻坚摆到治国理政的重要位置,全面打响了脱贫攻坚战。十九大又提出“要坚持中央统筹、省负总责、市县抓落实的工作机制,强化党政一把手负总责的责任制”,把精准扶贫提升到了新的高度。这充分体现了国家对扶贫的重视和打好这场战役的决心,也反映了精准扶贫任务的艰巨和急迫。为了实现脱贫的治理目标,不同治理主体(党政军群校企)开展了旷日持久的扶贫攻坚战,各种治理举措也层出不穷。政府作为精准
放牧是北方天然草地最主要的利用方式之一,已有的研究关注不同放牧方式如划区轮牧、早春禁牧等对草地生态系统结构与功能的影响,但是对于不同放牧强度的影响研究较少。放牧通过动物践踏、采食以及排泄等生物和物理过程影响植被和土壤的结构功能,进一步影响土壤温室气体通量。关于不同放牧强度对半干旱草地生态系统温室气体通量影响的研究报道较少,尤其是在北方农牧交错带草地生态系统尚未有报道。本研究拟通过在我国北方农牧交错
《特拉华筑坝历程》(Damming the Delaware—The Rise and Fall of Tocks Island Dam)是一本典型的流域管理类专著,具有很高的学术研究价值。本文以切斯特曼专业规范为理论基础,对该书的英汉节选翻译进行了总结和分析。作为一套伦理体系,切斯特曼专业规范旨在保证译者的伦理素养。它由责任规范、交际规范和关系规范三大部分组成。在本翻译实践报告中,责任规范主要针
目的:探讨白细胞(white blood cell,WBC)联合胆红素(total bilirubin,TBIL)在经皮冠状动脉介入治疗(percutaneous coronary intervention,PCI)术前术后变化水平对急性心肌梗死患者发生院内MACE事件的影响。方法:采用前瞻性队列研究设计,纳入新疆医科大学第一附属医院2013年9月至2017年12月资料完整的急性心肌梗死病例133
本文主要对过渡金属配合物催化活化C-X键(C=O,C-O和C-H)以及N-H键的反应进行了理论研究。主要包括钌配合物催化羧酸脱氧硼氢化的理论研究和钯配合物催化C-O键活化的理论研究
污染环境的行为,表现为对环保规定的蔑视与触犯,同时又造成了严重污染环境的后果。犯罪行为所造成的损害结果也绝非是单一的。有的损害结果是罪过评价意义上的危害社会的结果
黄土高原褐土带地形多样,丘陵广布,有机质含量低。采煤活动引起大面积土壤退化,土壤光谱特性受到强烈干扰,制约了区域尺度土壤有机碳(Soil organic carbon)含量遥感精度。本
在我国刑法理论中,犯罪预备是一个古老而又常见的话题。言其古老,系由于对预备行为的处罚最早可以追溯至秦律,“甲谋谴乙盗,乙且往盗,未到,得,皆赎黥”,由此可见,我国古代封
正系统是一类在现实生活中十分普遍的动力学系统.如果初始条件和输入为非负值,则系统的状态和输出始终为非负值,这样的的动态系被称为正系统.切换系统也同样作为混合动态系统