二值化忆阻神经网络设计

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:xiaoxz
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
存算一体化即使用存储器存储数据的同时完成计算,是目前解决存储器与处理器分离所导致的冯·诺依曼瓶颈的有效方案。忆阻器的十字交叉阵列能够基于欧姆定律和基尔霍夫定律通过模拟计算实现神经网络中的矩阵向量乘法的功能,其使用忆阻器阵列存储权重值信息的同时能够在阵列上完成计算,有效实现存算一体化,能显著加速神经网络计算。二值神经网络是一种特殊的神经网络量化方法,能有效减小网络模型、降低网络所需存储量与计算量、便于硬件部署。目前多值模拟忆阻器存在许多非理想因素,往往会给忆阻神经网络准确性带来影响,且忆阻神经网络因为缺少契合的算法也导致其发展应用受到限制。因此,改善忆阻器性能或设计契合忆阻器特性的神经网络算法至关重要。所以本文从目前最成熟的二值忆阻器入手,选取了便于硬件部署的二值化神经网络算法,基于忆阻器的存算一体化原理设计了二值化忆阻神经网络,并通过仿真分析其可行性。首先结合实际阵列设计需求,使用Python编写了基于二值化忆阻神经网络的算法程序,其采用了0、1输入及激活值和±1权重值,仿真实现了MNIST手写字体数据集识别任务,并通过仿真选取了合适的网络规模。然后针对忆阻器的独立结构和1T1R结构分别设计了突触器件、阵列结构及操作方式,通过两个忆阻器构成的差分结构实现了突触器件,能有效存储±1权重值,且能降低器件非理想因素的影响。最后编写了仿真代码探究器件失效、编写失败、读写误差和保持退化等问题对二值化忆阻神经网络造成的影响,并量测了实验室实际制备器件的对应参数以分析实际效果。通过仿真发现基于二值忆阻器设计的二值化忆阻神经网络有着较强的鲁棒性,读写误差和低于1%的器件错误率对网络准确率几乎没有影响,但需要器件有较好的保持特性。本文设计了一种可行的忆阻神经网络方案,并为后续忆阻神经网络算法设计和硬件部署提供了一些有益的参考。
其他文献
在全球兴起的建立国际商事法庭的浪潮中,中国为了应对“一带一路”带来的商事活动与商事纠纷的“双增长”,也为了提升其跨国商事审判的专业化水平,从而增强本国司法的国际影响力和竞争力,于2018年分别在深圳、西安建立了中国国际商事法庭。中国国际商事法庭的建设虽已初见成效,但其国际化程度尚不足。具体包括:多元化纠纷解决机制主体国际性不足,人才国籍单一化,管辖范围过窄,诉讼程序繁琐,域外执行困难,等问题。而对
近几年来,如何通过低成本的制备工艺来合成纳米有序结构材料成为了科研热点。多孔阳极氧化铝具有良好的自成形纳米结构,利用阳极氧化铝膜的纳米级有序孔,采用压印的方式,获得具备纳米结构的材料成为了相关领域的研究热点。但是铝膜的整个制备过程需要持续数小时,实验人员需时刻关注制备状态,投入的时间精力较大。因此,设计一台能制备大面积高质量多孔阳极氧化铝膜的设备,并设计控制软件实现自动化制备、精细化调控尺寸是十分
近年来,随着传统资源的日益枯竭,新能源电池产业得到迅猛发展。高纯硫酸锰作为三元电池材料的重要原料,其纯度将直接影响电池产品的质量,实现对硫酸锰溶液的净化除杂具有较为深远的意义。而锰氧化物具有较大的比表面积,良好的孔隙结构,有较好的吸附潜能,但锰氧化物种类较多,晶型复杂,许多锰氧化物的结构及性质仍需进一步研究。本论文拟开展硫酸锰溶液中臭氧原位氧化制备锰氧化物及其在硫酸锰溶液中的吸附性能研究,探索出一
照片已经成为人们记录生活和相互分享交流的一个重要媒介,清晰的图像可以更好的表达拍摄者所要传递的信息,因而人们对拍照质量提出了更高的要求。但在弱光线环境中,照片存在着细节损失、噪声严重等问题,极大影响了图像的视觉效果。因此,本文设计了一种基于改进U-Net的多帧融合成像算法MSID,致力于增强低照度图像的可辨识性和对比度,在图像成像领域有着十分重要的研究意义。为了优化低照度图像的成像效果,本文首先分
相变随机存储器具有读写速度快、循环擦写次数高、存储容量大以及与CMOS工艺兼容等优点,满足了人们对海量数据的存储需求,其基本组成部分——相变纳米单元(Phase Change Nanometer Element,PCNE)具有多值存储功能,可进一步提高存储密度并降低成本,但PCNE多值存储功能受电阻漂移的影响较大,因此,仿真研究PCNE多值存储功能下的电阻漂移具有十分重要的意义。本文基于PCNE的
频域电磁法(FDEM)是大地资源勘探的重要手段之一,探测磁场频率从0.1m Hz到数百k Hz不等,在磁异常检测应用中,通常磁异常值非常的小,范围为f T至数百n T,因此对磁传感器的工作频率和检测精度就提出了较高的要求。本论文提出了一种基于磁通门和TMR的混合宽带磁传感器,旨在解决目前多数低噪声磁传感器工作频带不高的问题,以满足磁场测量的多用途需求。磁通门传感器低频噪声小,但工作频率不高。TMR
小额贷款公司是介于传统银行和民间资金借贷公司之间的贷款机构。小额贷款公司相比于银行在小额贷款业务上更加操作灵活、办理便捷,适合个体工商户、中小微企业的流动资金需求;而与民间借贷相比,小额贷款公司则融资成本低、更加合法规范。小额贷款公司能够为小微企业以及个体工商户等提供一定的资金支持,有效地缓解融资难问题。但随着普惠金融政策的推广,市场上的小额贷款产品越来越多,小额贷款公司所面临的竞争也越来越激烈。
M物流公司是国际物流业内的标杆企业。根据来自公司内部系统数据分析,在中国大区内的工作效率是在世界其它地区的平均工作效率的150%-170%,是其它世界排名前二十企业的110%-130%(据2018年以来公司不完全统计数据)。但是,M公司在中小客户流程的工作效率,却是非常低下。统计数据显示:大客户服务团队所在的部门,工作效率普遍较高,高于平均工作效率的50-80%;中小客户服务部门的工作效率普遍较低
随着科技的发展,人们对于面板的便携性以及小尺寸性有了更高的要求,而In Ga Zn O Thin Film Transistors(IGZO-TFTs)存储器由于其对于显示模块以及存储模块的集合,使得其有了更小的物理尺寸极限,更大的集成度。与此同时,它还具有高分辨率、高刷新率以及低功耗等特性。而对于IGZO-TFTs存储器,有时会出现阈值电压漂移的现象,导致器件性能退化。另外,由于制备工艺以及条件
铣削加工是一种非常重要的加工制造方式,目前在机械制造加工行业中得到了广泛的应用。在铣削加工薄壁件过程中,由于工件刚度相对较低稳定性不足,很容易产生铣削颤振问题。颤振的发生会限制机床加工效率,影响加工表面质量,以及缩短刀具使用寿命等。因此,如何实现高效率、高精度和高可靠性的铣削加工成为了制造业亟待解决的难题。本文在总结了相关领域研究现状的基础上,对铣削过程中的颤振问题进行了研究。建立铣削力模型,基于