基于小世界拓扑的神经网络研究与应用

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:xynady
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,深度学习开始在计算机视觉、自然语言处理等领域发挥着越来越重要的作用,同时卷积神经网络被认为在深度学习领域尤其是计算机视觉中是最经典和强大的网络之一,目前流行的卷积神经网络模型主要有ResNet、DenseNet、AlexNet、VGG等,但是在图像识别领域,要想设计一个符合图像特性的网络模型需要大量的尝试,其中不仅仅包括模型的调参、同时也包括网络模型的设计。目前的网络多为规则或者随机的网络形态,但是随着科技的发展,人们发现在不同的领域例如:技术、交通、社会关系等网络中并非是简单的规则或随机网络,特别是在人脑的内在结构和功能联结模式上。这些网络存在与规则网络类似的高聚集系数和与随机网络类似的较短平均路径长度属性。小世界网络作为具有较短平均路径长度以及较大聚集系数的典型复杂网络模型近年来被广泛研究讨论。由此我们推测单纯依靠网络规则的层级传输可能导致人工神经网络与生物学神经网络在结构上偏离更远,不能反映真实的大脑神经网络的结构特征。本文首先对传统的神经网络进行了删边的稀疏连接操作,评估优化后的网络的结构特性是否具有小世界的特性。为接下来的设计实现提供理论基础。之后我们从类脑的小世界网络拓扑结构出发,对神经网络的结构进行改进,提出并设计了具有小世界特性的神经网络模型,此模型摒弃传统的网络分层结构,根据不同参数随机生成无分层结构的小世界网络拓扑作为网络训练模型,同时为了分析小世界特征图的不同属性对网络性能的影响,本文在CIFAR-10训练集上,分别设计了多组实验进行网络性能分析验证。通过对比不同参数配置下的小世界神经网络,验证了上述改进的必要性。训练结果表明,本论文的改进模型比如今的传统卷积神经网络收敛速度更快,逼近精度更高,拓扑结构的稳定性也更强。
其他文献
高校毕业生就业是社会关注的焦点问题,毕业生难以找到合适的工作、倾向“铁饭碗”等情况成为普遍现象。职业锚理论是现代企业人力资源管理的重要理论之一,将职业锚理论运用于本科生择业差异研究,不仅能够了解本科生职业选择现状与可能影响本科生职业选择的因素,也是发现本科生择业过程中存在的问题并帮助本科生顺利择业的有效途径。  施恩提出的职业锚理论为本科生的职业选择提供了理论指导,因此本研究以职业锚为视角和主要理
学位
[目的]  本研究在系统梳理总额预付制发展及其对医疗服务影响效应的基础上,探究总额预付制实施背景下三级公立医院医疗质量是否发生显著变化,进一步分析构建总额预付下的医疗质量影响因素体系,讨论总额预付下三级公立医院医疗质量变化情况和可能原因,有针对性地提出总额预付制度优化策略和医疗质量改进策略.  [方法]  本研究以武汉市为例,运用文献研究法系统梳理了国内外医保总额预付制度、医院医疗质量评价、总额预
学位
亚历山大技术起源于20世纪上半叶,是一门结合了医学、心理学、教育学、运动学等多学科的综合性课程,如今被广泛运用于欧美各国的音乐表演教学领域,其教学宗旨是帮助音乐表演者缓解在练习和表演中由于身心失调引起的紧张、疲劳和疼痛,发现并改进不良和无效的运动习惯,从而获得身心舒展和谐的音乐表演体验。亚历山大技术钢琴教学方法是一种钢琴教学辅助工具,它的作用是能够缓解钢琴演奏中的肢
教育公平关乎每位学生的利益,当下在高中教育阶段有不少“超级中学”、“神童班”崛起,“择校热”已成为社会热点问题。优质教育资源分布不均衡,导致了激烈的竞争。由此引发的问题是,更多更好的教育资源是否影响了学生的教育质量获得。批判性思维能力是学生教育质量的获得的一个重要体现。本文将从批判性思维能力角度出发,分析高中经历对本科生批判性思维能力的影响。  本文在基于沙因的认知发展理论和阿斯汀的I.E.O模型
学位
经过60多年的探索,中南民族大学从最初的少数民族干部培训班发展为一所以本科教育为主的综合性高校,构建起学科门类齐全、特色较为鲜明、结构较为合理、具有相当规模的学科体系。本文采用质性案例研究法,以中南民族大学为研究对象,试图通过对单个民族大学学科建设史的客观呈现,为民族院校深化改革提供借鉴。  中南民族大学的学科建设经历了从无到有、从少到多、从量的积累到质的提升,大致可以划分为五个发展阶段。“萌芽”
学位
党的十九大提出,要以提升组织力为重点,把各领域基层党组织建设成为坚强战斗堡垒。这一论述为全面加强基层党组织建设指明了方向。当前一些农村基层党组织政治作用突出,党员先锋模范作用不明显,不愿做、不会做群众工作,不善于教育引导群众,严重制约了党组织功能发挥。必须更加注重提升基层党组织组织力,激发基层活力,使党的基层基础更加牢固。  当前理论界在党组织组织力建设方面还缺少微观和实践层面的研究。本文通过文献
随着社区建设的发展和改革,居民的社区参与意识逐渐增强,通过社区事务和活动的参与,社区居民可以影响公共权力的运作,进而对各项社区资源进行重置。而低保资源作为社区中最为常见的一种资源,在配置过程中是否真的会受到社区参与活动的影响呢?学者们对此研究较少。基于此,本研究对2016年“中国城乡困难家庭社会政策支持系统建设”的数据进行logistic回归,通过分析发现社区参与因素对我国低保资源的配置确实存在较
学位
高中阶段学校考试招生制度(以下简称中考制度)是我国考试招生制度的重要组成部分,其结果是初中毕业和高中阶段学校入学的基础,在义务教育和高中阶段教育的衔接中发挥了重要作用。湖北省自1977年恢复中考制度以来,中考制度历经多次变迁。在40多年的制度变迁过程中,出现了认同困境、动力欠缺、效率不高等问题。  二战后,新制度主义理论范式在西方学术界一直占据着重要地位。国内外学者利用新制度主义对制度变迁的研究,
桩基础因其形式多样,承载力高,可用于复杂地质条件等特点,在建筑领域中的应用日益广泛。而螺旋钢桩作为一种新型变截面桩,具有施工周期短、绿色环保、对场地要求较少、承载力较高等诸多优点。近年来,螺旋钢桩的应用领域不断拓宽,在民用建筑、桥梁基础、路基建设、建筑基础加固中都有其运用的场景。然而目前对于螺旋桩安装后桩周土体强度损失与恢复的研究工作还相对缺乏,设计理论还不够成熟。
在“后摩尔定律”时代,新材料作为推动电子和光电子领域的下一个技术革命备受关注。以石墨烯为代表的二维材料在微纳电子和光电子等领域展示出广阔的应用前景。然而,在如何制备高质量、大面积二维材料,如何调控二维材料与衬底间的界面相互作用,如何拓展二维材料在微纳器件领域的应用等方面还有诸多问题亟待解决。基于此,本文通过对二维铋(Bi)和锑(Sb)温度依赖的拉曼光谱研究,发现了温