基于电子突触非理想特性的神经网络识别率仿真研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:ZCHHZCHH
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
现代计算机技术的发展和普及使其容量和处理速度得到了提高,但现有的计算机架构仍受限于冯·诺依曼体系结构,在大数据时代,难以满足人工智能对海量信息进行高效处理的要求。为了从根本上摆脱运算和存储单元分离的内存墙问题,实现内存计算,研究者受到人脑低功耗和高度并行计算的结构和功能启发,想要通过拟人脑神经网络的方式实现类脑计算并提升效率。随着各种新型的非易失性存储器的产生,如何将其用于电子突触实现对生物突触的模拟,并构建交叉阵列实现硬件上的神经形态计算,这成为研究者关注和探究的问题。然而使用电子突触训练神经网络会面临着各种非理想特性的挑战,造成识别精度下降,本文主要讨论电子突触的非理想特性对神经网络的影响并进行了仿真研究。本文首先介绍基于电子突触的神经网络研究背景,以及生物突触和电子突触的特点,说明电子突触器件构建交叉阵列实现矩阵计算的基本原理以及用于构建人工神经网络的各种非理想特性,这些特性对神经网络的推断和训练造成严重影响;其次,基于电子突触模型构建神经网络,在深度学习框架Pytorch的基础上编写了多层感知器的仿真代码,程序实现了权重与电导的量化与映射关系、前向计算流程以及反向传播中根据权重改变量计算脉冲数目更新权重;然后研究了电子突触的电导阶数、非线性和非对称性、D2D变化、C2C变化和SAF等不同特性对神经网络识别率的影响,仿真结果表明,虽然缩小权重的映射范围可以提高识别率,但电子突触非线性的特性使得权重更新产生误差,并显著降低了识别率;最后,研究了提高线性度和优化权重更新的几种方法,并在仿真中使用Adam算法替换梯度下降算法更新权重,对于不同电导阶数的电子突触,通过调整学习率,控制权重更新的脉冲数目,可以提高识别率。这些研究对非易失性存储器的应用和基于电子突触的神经网络硬件电路实现有关工作具有重要的指导意义。
其他文献
随着激光技术的不断发展,在制造业中激光加工技术的应用越来越广泛。振镜扫描光学系统是激光加工设备中的核心部分,能够有效的提高激光加工的精度和效率。目前来说,振镜扫描系统存在的最大问题在于畸变,并且畸变主要来源于振镜系统本身,在实际生产加工中造成较大的影响,故振镜校对是目前激光加工中的一大难点。本文主要研究了振镜扫描系统的校对方法,并开发了一款能够实现校对的软件工具。本论文首先研究了振镜扫描系统,包括
学位
除了电子的电荷和自旋两个内禀自由度之外,固体材料的能谷自由度也可以作为信息的载体,由此兴起了“谷电子学”的研究。谷电子学因具有能耗小、速度快、集成度高和信息不易丢失等优点近年来受到广泛关注。特别地,单层二维过渡金属硫化物(TMDs)具有两个不等价的能谷,谷自由度可以通过光学和电学手段进行有效调控,大大促进了谷电子学的发展。而TMDs中谷电子或谷激子的分离是实现谷电子器件的关键,目前有通过加电场的方
学位
钛酸锶钡是一种具有可调谐性能的材料,其调谐性能具有广泛的应用,比如,移相器,可调谐滤波器等。然而纯的钛酸锶钡材料因为其自身的高介电常数,高损耗等缺陷,限制了它在很多领域的应用。因此,研究如何降低钛酸锶钡的介电常数和介电损耗同时保持不错的调谐率具有重要意义。在钛酸锶钡中掺入线性介电材料形成铁电-介电复合陶瓷和改变烧结工艺是优化介电性能的重要途径。本论文利用固相烧结法制备了Ba0.55Sr0.45Ti
学位
随着城市基础地下设施的发展及对火灾安全监测的需求,利用近年兴起的光纤火灾监测技术对地下管网安全监测具有很大的现实意义。本论文在研究光纤火灾监测系统中的拉曼散射效应基础上,提出采用神经网络算法实现光信号至温度的解调,能够根据实际情况对光信号的衰减和系统误差进行补偿,对光纤传感监测技术的应用具有很大的实际意义。论文对光纤火灾监测理论及系统结构,神经网络算法进行了深入研究,设计并完成了监测软件,工作如下
学位
20世纪70年代开始,光纤通信技术迅速发展,光纤传感技术也并驾齐驱,其已被广泛应用于军事国防、航天航空、能源环保、生物传感等各个特定领域。干涉式光纤传感器由于灵敏度较高的优势,成为了光纤传感技术研究中的一大热门。传统干涉解调主要利用到的干涉参量包括强度、波长和相位,其在解调过程中容易受到光源功率抖动、参考臂相位漂变、光谱仪波长漂变等问题的影响。考虑到干涉光谱中未被利用到的条纹对比度,本论文提出了一
学位
基于双光子吸收的飞秒激光直写技术具有超越光学衍射极限的加工精度以及复杂三维结构的加工能力,在微光学器件、光子材料制造、微流控器件、光子集成芯片以及生命科学等领域具有广泛应用前景。在利用激光直写技术制造三维结构时,加工路径对结构的性能有着重要影响。本文针对基于双光子吸收的飞秒激光直写技术制造三维结构中结构加工路径的规划方法和修正进行了详细研究。论文的主要工作包括以下方面:(1)完成了飞秒激光直写三维
学位
对区域用电负荷监测是实施电力需求侧管理的重要方法,具有显著的社会效益和经济效益,而非侵入式负荷监测(NILM)无需进入用户内部,通过智能化感知方法将用户总负荷分解为各用电设备的信息,是负荷监测的主流方法和发展方向,具有重要研究价值。目前NILM存在着识别精度低、数据量大、对云计算技术依赖性强等问题,本文设计一种基于V-I轨迹图的非侵入负荷识别设备和系统,不依赖云计算,在用户侧即可识别负荷信息,有效
学位
光纤布拉格光栅利用纤芯折射率的周期变化,使入射到光纤光栅上的光产生衍射效应,从而达到滤波的效果。由于其损耗小、成本低、抗电磁干扰和耐高温,光纤布拉格光栅已被广泛用于通信和传感领域中。现阶段光纤光栅制备工艺已十分成熟,但现场工艺操作者并不熟悉光纤光栅理论,无法进行光纤光栅设计。在实际应用中,光纤布拉格光栅的结构对其光谱影响显著,这就需要制备人员了解光纤布拉格光栅结构,并根据应用的需求,设计并制备满足
学位
太赫兹波是6G通信的主要通信波段,太赫兹调制技术作为其核心部分值得深入研究。等离子体诱导透明这种具有色散、低损耗与慢光效应的类电磁诱导透明现象,得益于超材料的发展,变得较为容易实现与产生。钙钛矿由于其优越的光电响应,可以应用在太赫兹调制技术上。本文研究了基于等离子体诱导透明及钙钛矿的太赫兹超材料调制器,主要研究内容如下:(1)研究了等离子体诱导透明现象产生的原理,并用洛伦兹耦合模型分析了等离子体诱
学位
随着半导体器件特征尺寸的不断减小,MoS2因其优异的电学性能被认为具有作为下一代纳米电子器件沟道材料的潜力。虽然对于MoS2FETs(Field-Effect Transistors)的研究已经取得了一定的进展,但器件载流子迁移率仍远未达到其本征极限,限制了MoS2在高性能半导体器件的应用。因此,本文主要围绕着提高MoS2FETs迁移率展开研究。实验方面,以SiO2作为栅介质,在150、200和2
学位