【摘 要】
:
随着机器学习的发展,涌现出许多优秀的算法,子空间学习以其对数据的降维约简作用被学者们应用于各个学科领域。PCANet将子空间学习与深度学习结合掀起了深度子空间学习研究的热潮,但存在拓扑结构造成特征维度爆炸,以及缺少非线性使网络退化为单一的层等缺陷。PCANet+通过更改网络拓扑结构并增加非线性层使算法在人脸识别中具有更好的表现,但由于使用过量大尺寸卷积核造成计算资源的过度消耗。因此,本文以PCAN
论文部分内容阅读
随着机器学习的发展,涌现出许多优秀的算法,子空间学习以其对数据的降维约简作用被学者们应用于各个学科领域。PCANet将子空间学习与深度学习结合掀起了深度子空间学习研究的热潮,但存在拓扑结构造成特征维度爆炸,以及缺少非线性使网络退化为单一的层等缺陷。PCANet+通过更改网络拓扑结构并增加非线性层使算法在人脸识别中具有更好的表现,但由于使用过量大尺寸卷积核造成计算资源的过度消耗。因此,本文以PCANet+作为研究切入点,PCA理论作依据,利用多尺度特征提取单元、深度可分离卷积以及通道融合等技术提出了三种深度子空间学习算法。本文详细论述了各个算法提出的动机及原理,并在多个识别任务中进行测试,以验证算法性能。本文主要贡献包括:第一,针对PCANet+所需计算资源大,计算时间长等问题,本文提出一种基于多尺度特征提取单元的改进PCANet+,并命名为PCANet++,利用不同尺寸、数量的卷积核对接收到的数据进行卷积提取出丰富的特征。在实际测试中发现,将平均池化层加入到多尺度特征提取单元中会增加单元的表现力。与普通的PCA卷积层相比,本文提出的多尺度特征提取单元层能够实现更好的特征提取效果。另外,使用多尺度特征提取单元层代替原有的大尺寸卷积层,参数量和计算量将大幅减小,从而达到加速计算、降低资源消耗的目的。第二,针对PCANet计算时间长,特征维度呈指数增长等问题,提出了两种基于可分离卷积和通道融合策略的轻量化PCANet。在对PCANet++进行计算时间消耗分析后,发现卷积耗时最长,成为了时间瓶颈,因此提出了两种方案来突破时间瓶颈。一种为基于可分离卷积的PCANet_dw。可分离卷积将标准二维卷积分为Depthwise卷积和Pointwise两部分,通过的卷积核和二维平面上的卷积降低计算量,进而加速卷积计算。实验证明,与标准二维卷积相比,可分离卷积在达到相同特征提取效果的同时,其参数量仅为标准二维卷积的三分之一。另一种为基于通道融合策略的PCANet_fuse。通道融合策略利用PCA的原理,在通道上进行特征融合,将标准二维卷积变为二维平面上的卷积,从而将参数量减少为1/c(c为通道数)。论文在三个计算机视觉任务,四个公开数据集上对算法的参数影响、算法效率、实验开销和性能进行测试和分析。实验结果表明,与同类型算法相比,使用多尺度特征提取单元的算法能够实现最好的识别效果,并且能够有效降低计算量;基于可分离卷积和使用通道融合策略的算法则能在识别准确率略微上升的同时大幅加速计算,降低消耗,实现轻量化目的。
其他文献
自动化制造系统是工业自动化的重要表现,其传统的设计是一个串行的过程,在正式投入使用前的最后一步是实机调试,是整个环节中最关键的一步,对设计周期、成本、风险的影响非常大。随着用户对产品多样性、个性化要求的不断提高,要求自动化制造系统设计周期更短、建造成本更低、调试风险更小,传统的调试显然无法满足上述要求,虚拟调试由于可以在虚拟环境中完成系统的大部分调试过程,是解决上述问题的有效手段。近年来,随着数字
10KV配电网络故障是造成区域停电的重要原因。架空配电线路多采用裸露导线,裸导线相比于绝缘线价格低廉且有利于散热,但架空线路周边环境复杂,生长的树枝、飘落的异物等都会造成线路短路事故。传统的线路绝缘改造主要采取人工整体更换绝缘线方式,传统方法的工作效率低、安全性较差。目前国内已经提出的架空线路绝缘机器人存在重量大、结构复杂、可能污染环境等问题。本文针对10KV架空线路研制一种新型绝缘包覆机器人,具
开发一种准确、高效的故障检测方法对杆塔的维护有着重要意义。本文结合电磁感应理论和深度学习方法,利用深度学习模型实现了杆塔接地网的故障定位与腐蚀程度诊断,同时针对实际场景,应用领域自适应方法对模型进行特征迁移,使之能应用于常规故障的诊断。具体内容如下:(1)分析电磁感应方法在接地网故障诊断问题中的有效性,并对杆塔接地网故障诊断问题建立电磁学模型,同时讨论了电流激励方式、电流激励频率和土壤分层结构对地
桥门式起重机因负载能力强、场地利用率高、操作灵活、通用性强等优点而被广泛运用与生产和物流环节中。通常桥门式起重机的吊重通过钢丝绳与小车相连,吊运过程中小车的启、制动和加、减速会使吊重产生运行摆动以及到达目标位置后的残余摆动,这不仅影响吊重的精确定位,降低工作效率,严重的会导致吊重坠落或起重机结构的疲劳,存在很大安全隐患。因此本文针对存在参数不确定性和外界扰动的桥门式起重机防摇摆控制问题,提出了有效
道床刚度作为一种重要的道床质量评价参数,目前常用的测量方法需要拆除扣件进行,流程繁琐、效率低下。动力稳定车作为一种重要的大型铁路维养机械,在新建及大修后有砟轨道的道床质量提升方面具有重要作用,其主要目的是为了迅速提高道床密实度,进而提高道床的垂向刚度与横向阻力。但目前的动力稳定车仍然具有一些不足,动力稳定车对于作业路段的判定以及作业参数的设置主要依靠工作人员的经验,缺乏科学的数据指导,针对上述问题
架空高压输电线路通常架设高度较高,且多分布在环境复杂的大山、河湖之间,使人工巡检维修难度大,成本消耗高。当遇到大雪天气引起线路严重覆冰时,使用人工清理的方法往往会因处理不及时而导致线路坍塌现象,更严重时可能造成人员伤亡。因此,使用人工处理雪情具有工作效率低、安全性较差等缺点。然而,目前输电线路除冰机器人的研究,几乎都是采取线路覆冰后再使用机器人进行除冰的方法,这种方式存在对已覆冰的输电线和铁塔难以
壳聚糖(CS)是一种天然多糖,具有良好的生物相容性和抗菌性能,常作为生物材料用于医学的研究。壳聚糖和壳聚糖基水凝胶是良好的药物载体,由于具有止血、抗菌、促进成纤维细胞增殖等特性,对创面愈合具有积极作用,此外,壳聚糖能在伤口区域刺激天然透明质酸成分的分泌,从而促进伤口更快愈合,减少疤痕的形成。但壳聚糖主链上的许多氨基使其表现为弱碱性,不溶于水或有机溶剂,只有在酸性介质中,氨基被质子化后才能促进其溶解
随着人民生活水平的提高,对食品的安全越来越重视,主要采用点阵字符标识的生产日期,既是消费者判断食品安全的重要依据,也是供应商对食品安全性的保证。点阵字符是由离散点喷洒构成,容易受环境和设备影响产生缺陷,如:变形、缺印、污印等,采用人工检测费时耗力,不能满足生产发展和市场的需要,人工智能的崛起推动了各行各业的发展,利用人工智能技术对字符进行检测是未来的发展趋势。因此,本文针对上述问题,对基于深度学习
锌基金属因其适中的腐蚀速率被视为最具应用潜力的生物可降解金属材料,然而纯锌的综合力学性能难以满足大部分植入部位的临床服役要求,且其不均匀的腐蚀模式增大了植入体提前失效的风险。此外,锌基植入体服役过程中释放的过量Zn2+表现出了明显的细胞毒性。基于此,本论文通过合金设计及热机械工艺改性,优化并制备了新型Zn-Cu-Zr合金,以改善锌基金属的综合力学性能、腐蚀行为及生物相容性,并进一步揭示了合金的微观