面向复杂场景的口罩人脸与步态融合识别关键问题研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:wukeda139
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在信息化智能化的当代,生物特征识别技术已被广泛应用于安防监控等重要领域以保障个人与社会安全。其中人脸和步态识别以及其多模态融合识别具有无感非接触式的特点,展现出极大的研究和应用价值。然而,面对实际复杂场景中的多种挑战,人脸和步态识别以及其多模态识别系统存在如下亟待解决的问题:对于步态模态,如何从复杂场景的低质量轮廓数据中提取鲁棒的身份特征是关键问题之一;对于人脸模态,配戴口罩是应用场景中的常见问题,口罩遮挡了大量脸部信息成为人脸特征提取的难点;对于多模态生物特征识别系统,如何有效的结合人脸和步态信息提升复杂场景下系统整体的识别性能是难点和痛点之一。针对上述问题,本文分别对无约束步态识别算法和口罩人脸识别算法,以及结合步态和人脸的多模态融合识别这三个关键点开展工作:第一,针对无约束步态识别问题,本文提出了一种高效优化策略充分利用复杂场景带噪声的步态数据训练特征提取模型,提升复杂场景下步态识别的准确性和鲁棒性。通过设计质量过滤模型去除丢失身份信息的低质量训练数据,并进行高斯模糊和随机遮挡实现数据扩增,以三元组损失和Softmax分类损失构建多任务损失联合优化步态特征提取模型。本文提出的优化策略应用在无约束步态识别比赛数据集上的能提升5.8%的准确率,并且能推广到其他步态基准数据上提升步态识别性能。第二,针对复杂场景中的口罩遮挡问题,本文提出了分块注意力双支路联合优化的口罩人脸识别算法,包括自注意力和先验注意力机制。设计的自注意力模块通过增强特征图的有效通道和空间位置的权重,提升骨干网络的特征表达能力。此外,设计的先验注意力通过构建局部分块支路形成双支路结构,在训练阶段引导人脸特征提取模型关注上半脸的未遮挡区域。在多个合成和真实口罩人脸数据集上进行实验,与其他先进算法对比,本文提出的算法展示出最好的效果。第三,结合步态和人脸特征的多模态生物特征识别,本文提出了一种基于深度学习的人脸步态特征融合算法,并设计和搭建了一套可实时运行的面向复杂场景的多模态生物特征识别系统。本文使用神经网络融合多模态特征,利用三元组损失优化融合模型的参数,在特征层实现人脸和步态信息融合,在构建的多模态数据集上展示出比单模态特征更好的识别性能。综上,本文设计多模态自适应识别策略以及融合算法构建了一套人脸与步态融合识别系统,在实际场景中应用能进行有效的身份识别。
其他文献
减少甲烷排放已成为现代奶牛养殖业中关注的热点问题。为探究日粮等水平单独或组合添加单宁酸和茶多酚对奶牛瘤胃发酵、瘤胃微生物群落结构、甲烷排放、乳产量、乳成分、养分表观消化率和血液生化指标影响。试验一:以基础日粮为底物,单独添加不同水平单宁酸和茶多酚(0%、0.2%、0.4%、0.6%和0.8%DM)进行瘤胃体外发酵试验。结果表明:随着单宁添加水平的升高,瘤胃氨态氮含量、干物质(DM)和中性洗涤纤维(
学位
近年来,为突围国外芯片相关厂商长期经营形成的垄断圈,国家大力发展半导体产业,目前全产业链都取得了不错成绩。其中,半导体测试编带设备处于整个产业的下游,其能否安全高效运行关乎芯片生产质量,因此对其进行合理控制的重要性不言而喻。当前,我国高端半导体测试编带设备主要依赖进口,而面向芯片尺寸封装(Chip Scale Package,CSP)等类型芯片的蓝膜上料编带设备,其国产化程度更低,绝大部分利润都被
学位
为探索在西门塔尔公牛日粮中补充包被核黄素(CRF)和包被泛酸钙(CCP)对增重性能和瘤胃发酵的影响,选择40头西门塔尔公牛,采用2×2因子按照10月龄,体重250±12.2 kg的相近原则,随机分为4组:(1)对照组:基础日粮;(2)CRF组:基础日粮+CRF(CRF中含32 mg RF/kg DM);(3)CCP组:基础日粮+CCP(CCP中含50 mg PA/kg DM);(4)CRF+CCP
学位
报纸
本试验旨在探讨以枯草芽孢杆菌、嗜酸乳杆菌和酵素为主的复合微生态制剂对樱桃谷鸭肉用性能、血清免疫、抗氧化和肠道健康的影响。试验选取480只健康的体重相似的1 d樱桃谷鸭(48.74±0.59 g),随机分成F300、F500、F700试验组以及1个对照组,每组6个重复,每个重复20只樱桃谷鸭。空白对照组饲喂基础饲粮;F300、F500和F700组分别在基础饲粮的基础上添加了300、500和700 g
学位
施工安全是工程建设中的重要内容,其关系到施工人员的人身安全,而佩戴安全穿戴是很多施工现场必备的安全规范内容。如何准确、高效地监测工人佩戴安全穿戴的情况,成为了各施工管理单位亟待解决的问题。随着计算机视觉的发展,近年来越来越多的计算机视觉相关技术被应用到了安全监控场景当中,实现了对工人佩戴安全穿戴的自动化检测。为了实现更好的安全穿戴检测效果,本文就(1)如何构建合理、灵活的算法,(2)如何利用先验信
学位
吕梁黑山羊是山西省独特的地方畜禽遗传资源,具有肉质鲜美、抗病力强、耐粗饲、采食性强等特点。但由于长期缺乏系统科学的选育,生长速度慢、繁殖率低的品种特性没有得到有效改善,不符合产业发展趋势。本研究通过对吕梁黑山羊的生长规律和繁殖性能的分析,为吕梁黑山羊的保种与选育提供一定的理论依据。选用Logistic、Gompertz、von Bertalanffy 3种非线性模型对441只吕梁黑山羊(公羊273
学位
为研究胍基乙酸(Guanidine acetic acid,GAA)和甜菜碱(Betaine,BT)对绵羊瘤胃降解特性及消化代谢的影响。试验共分为以下几个部分:试验一:采用单因子试验设计,在精粗比70:30的TMR中分别添加4种水平的BT(0、1 g/kg、3 g/kg和5 g/kg);以及4种水平的GAA+BT(5 g/kg)组合(0+BT、0.03%/kg+BT、0.06%/kg+BT和0.0
学位
本试验旨在研究外源性褪黑素对热应激种公羊精液品质、血清和精浆抗氧化能力及内分泌激素的影响。本试验选取20只2-3岁,体重90±3 kg健康湖羊种公羊,随机分为对照组(CON)和褪黑素组(MT),每组10只,对照组饲喂基础饲粮,试验组饲喂基础饲粮+埋植褪黑素(试验期0、60d于颈部皮下按2mg/kg BW埋植褪黑素),预试期10 d,正试期75 d。主要试验结果如下:1.精液表观参数:在试验期0~7
学位
随着现代科技的不断发展和互联网的普及,人们日益重视个人隐私的保护,信息安全意识也在不断提高。近年来,生物特征识别技术以其优异的用户特异性、安全性和便携性,逐渐取代了传统的基于实体身份识别媒介的方法,称为身份认证的主流。其中,指静脉识别技术作为一种新兴的生物特征识别技术,因其独有的生长稳定性和防伪防盗性,在研究和应用领域备受关注。然而在现有的指静脉识别系统在实际应用中,依然存在一些关键问题亟待解决。
学位