忆阻器脉冲神经网络关键技术研究

来源 :国防科技大学 | 被引量 : 0次 | 上传用户:puweiaipk1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
忆阻器(memristor)给后摩尔时代计算的物理基础带来了颠覆性变化,为人工神经网络的硬件实现提供高效能解决方案,将进一步提升人工智能的信息处理能力。其中,忆阻器脉冲神经网络运用忆阻器的阻变特性仿生人脑中的处理机制,有望从器件与算法上为人工智能创造新的发展机遇。然而,现阶段忆阻器脉冲神经网络实现还面临一些困难。器件方面,实验室生产的忆阻器性能尚不能满足大规模阵列集成,从精度、耐久性、良率和一致性等方面影响了网络功能的实现。算法方面,由于缺乏有效的训练方法,忆阻器突触和神经元电路的功能设计较为局限,限制了网络性能的提升。本文围绕解决现有条件下忆阻器脉冲神经网络的实现问题,从突触应用、神经元设计、训练方法和权值映射等方面开展研究。论文的主要工作如下:第2章研究人脑的遗忘机制,提出一种引入突触遗忘机制的网络训练方法,通过仿生人脑遗忘机制对学习的影响以减少网络权值的调整次数,能够显著地提高训练效率以支持在线应用的实现。首先,研究仿生遗忘机制,并建立忆阻器突触遗忘的电导响应模型(第2.1节)。进而,介绍单层忆阻器脉冲神经网络架构及其训练方法,并提出一种引入突触遗忘机制的改进方法(第2.2节)。然后,设计该改进训练方法的关键电路方案,并仿真验证该方案的可行性(第2.3节)。最后,通过算法仿真验证该训练方法,并将其与传统方法进行比较分析(第2.4节)。第3章提出一种自激活型脉冲神经元的设计与应用方法,通过增加输入均衡、空间和时间相互作用等原理机制使神经元具备自激活能力,简化了神经元电路的实现。首先,阐述自激活型神经元的输入均衡、空间和时间相互作用原理设计(第3.1节)。其次,从权值更新和训练流程两方面介绍该神经元在多层网络中的应用及训练方法调整(第3.2节)。然后,设计该神经元的关键电路实现方案,并通过LTSPICE仿真验证其功能的完整性(第3.3节)。最后,仿真分析该训练方法的网络性能,研究有限精度、电路噪声、写入噪声、阵列良率和器件间不一致性等非理想因素的影响,并将其识别性能、计算能效比与已有算法和硬件系统进行比较(第3.4节)。第4章提出一种网络局部互联的多层网络实现方法,将输入和隐含层的全连接改为若干个子输入层和子隐含层的连接,显著简化连接电路并提高网络性能。首先,介绍网络互联架构,并对符号进行定义(第4.1节)。进而,阐述架构中的局部连接子网络映射方法(第4.2节)。然后,提出具有局部子网络互联的多层网络训练方法,包括基于忆阻器非线性电导响应的学习速率调整方法和网络训练工作流程(第4.3节)。最后,仿真测试该方法的网络性能,利用参数可视化方法分析训练过程中神经元内部状态和突触权值的变化,同时研究忆阻器阵列非理想特性对网络性能的影响,最后将其性能与类似结构的脉冲神经网络和忆阻器卷积神经网络进行对比(第4.4节)。第5章提出一种面向网络权值矩阵映射的忆阻器阵列调控方法,通过对1T1R阵列中晶体管栅极电压的反馈控制,实现对忆阻器阻值的精确、稳定调控。首先,介绍忆阻器阵列调控的原理设计和电路实现方法(第5.1节)。然后,介绍硬件测试验证系统的硬件组成和软件功能(第5.2节)。最后,测试分析该调控方法的阻值写入精度和稳定性,并通过图片写入测试和脑电信号分类应用进一步验证本方法的调控效果(第5.3节)。
其他文献
纵观高能激光器的发展史,随着输出功率的提升,研究人员始终与伴随激光产生的有害热效应进行着不懈的斗争。在这部斗争史中,光纤激光器以其较大表面积体积比的独特优势,成为目前高功率激光器的主流技术方案之一。然而时至今日,随着单纤万瓦级输出功率的突破,纤芯内部所承载的热量越来越高,并伴随着许多与纤芯温度直接或间接相关的限制因素出现,阻碍大功率光纤激光的发展。着眼于向更高功率的发展,从纤芯温度的视角开展研究,
学位
多机器人系统得益于较单机器人系统的巨大优势而被众多领域的研究人员所关注。为适应逐渐复杂化和动态化的任务环境,如何提高系统的智能化水平已然成为该领域的研究重点。而多机器人系统的智能一方面体现在其本身的机器智能,主要包括各种硬件的配置以及相应的算法设计,另一方面也与作为操控者的人类有关。针对前者,目前最主流的思路是通过机器学习拓展与丰富多机器人系统的机器智能,而后者则主要依托人类智能实现人在回路的人-
学位
传统正交多址接入技术中,用户在无线资源(时间、频率、空间、码序列)上具有独占性,导致了系统总容纳传输用户数受无线资源的可分粒度限制,不能进行弹性扩展。同时,随着编码调制技术的逐步演进,点到点单链路的频谱效率已逐步逼近香农极限。因此,在给定的频谱资源下,正交多址接入系统的网络总频谱效率和系统容量已难以提升。为谋求系统整体容量的提升,近几年来,以稀疏码多址接入技术(Sparse Code Multip
学位
非线性Schr(?)dinger方程是现代科学中最重要的非线性模型之一,广泛应用于数学和物理学领域。特别地,本文研究带δ势非线性Schr(?)dinger方程,该方程是描述短程相互作用的理想化模型。由于所研究的方程包含δ奇异项,构造其数值方法具有挑战性,特别是对于有限差分方法而言。本文提出利用变换的方法,消除方程中的δ奇异项,进而构造有限差分格式进行求解。主要工作如下:首先针对带一个δ势一维非线性
学位
近地小行星的资源勘探利用,不仅能够提供工业所需的稀贵金属,还能提供星际航行所需的可持续能源,有助于抢占构建太空经济圈的先机。国内外已开展一系列小行星探测任务,完成了小行星绕飞探测、着陆探测及采样返回的技术验证。然而,资源勘探与利用所需的燃料消耗、小行星物理参数不确定、引力不规则、与地球通信延迟等因素使得小行星资源勘探与利用任务具有挑战性。研究小行星资源勘探与利用任务中的轨道设计与运动控制问题具有重
学位
人类社会中各主体之间的联系,可以通过复杂社会网络进行描述,如社会接触网络、社交网络、交通运输网络等。这些网络中的传播行为对人类社会有巨大影响,其中以疾病传播和舆情传播的影响最为突出。近年来,SARS、COVID-19的暴发造成了巨大影响;随着互联网以及社交媒体的不断发展,舆情在社交网络中传播也对人类社会产生越来越大的影响。然而当前对社会网络传播行为的研究,特别是对人类接触行为规律的研究还远远不够,
学位
卫星导航系统作为基于时间测量的测距定位系统,精确的时间维持和测量是提供高精度定位、导航和授时(Positioning,Navigation and Timing,PNT)服务的基础。在自主运行模式下,导航星座无法接入由地面运控系统维持的导航系统时间,为保证PNT服务效能,就需要通过星间链路相对时间测量,联合卫星钟建立一个溯源于导航系统时间的自主运行时间基准,即星间链路时(Inter-Satelli
学位
大脑白质是连接大脑灰质区域和皮层下区域的基础结构,是脑区之间进行高效信息交互的媒介。弥散张量成像基于高斯模型在单指数扩散成像的基础上利用各向异性扩散张量重建脑组织微观结构。它的四个量化参数,包括各向异性,平均弥散率,轴向扩散率和径向扩散率,对脑白质微结构的改变非常敏感,常用于刻画脑白质微结构的改变。基于弥散张量成像的脑白质微结构分析方法常用于脑发育、脑老化与脑认知功能的研究,也常用于脑疾病病理变化
学位
利用微型多旋翼无人机探索未知区域在军民领域有广泛的应用前景,其中探索轨迹规划是重要的研究内容。探索轨迹规划通常包含两部分,探索任务规划及相应的轨迹规划。通常探索任务规划为无人机的轨迹规划提供目标,轨迹规划则为无人机提供避障的飞行轨迹,二者规划的共同目标是提高探索效率。对于单无人机,轨迹规划的难点在于既要使轨迹避障又要满足无人机的动力学约束,还要适应大范围探索区域,同时具备在线运行的能力。对于多无人
学位
摄像测量方法具有非接触、高精度、低成本、实时动态、普适性强等独特优势,已广泛应用于航空航天、军事侦察、安防监控、工业检测、交通运输、建筑施工、医疗与机器人等诸多领域。目前摄像测量方法研究主要集中于观测几何相对较好的条件,然而实际工程实践中,受制于成像传感器的物理上限以及测量任务的受限环境,观测几何条件几乎不可能达到最优,更为普遍的情况是观测条件次优或表现为大倾角、小视场角、小交会角或透镜光轴不垂直
学位