复杂遮挡人脸高效检测算法研究

来源 :福建农林大学 | 被引量 : 0次 | 上传用户:monowing
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸检测在无人驾驶、视频监控与安防、搜索营救等领域具有广泛的应用,是人脸智能系统的基础任务。近年来深度神经网络在成像良好的人脸检测任务中获得了较好表现,但在复杂场景中,脸部遮挡变化引起的视觉干扰显著降低了检测器性能。一方面遮挡物的多样性和随机性对人脸检测模型有着巨大的影响;另一方面许多应用场景中边缘设备的计算资源非常有限,很难支撑高精度人脸检测模型有效完成复杂的人脸检测任务。如何高效、鲁棒地实现速度和精度平衡的遮挡人脸检测,是一个富有挑战的问题。因此本文重点对减少由于遮挡造成的漏检、误检和复杂人脸模型的轻量化进行研究,主要研究内容及成果如下:(1)针对复杂场景中的遮挡干扰,提出了多任务感知遮挡人脸检测算法MTOFD。与基于非遮挡区域特征增强的方法不同,该算法通过引入遮挡语义信息增强了遮挡人脸特征,并设计了语义注意网络模块实现遮挡特征在多任务框架下的融合,改善了复杂遮挡场景的人脸检测。(2)针对遮挡人脸检测模型复杂、运行条件苛刻等困难,从知识蒸馏方法出发开展遮挡人脸检测模型轻量化研究,提出了任务自解耦的知识蒸馏方法TSDKD。该方法增添自适应解耦层提取不同任务的特征,并通过差异实例生成模块有选择地对特征进行蒸馏。此外还通过改进的分类蒸馏损失改善了正负样本不均衡问题。上述改进实现了复杂模型到简单模型的知识迁移。(3)在Wider Face和MAFA数据集上进行了复杂遮挡人脸检测实验。实验结果表明MTOFD算法有较好的表现,比基线算法的准确率提高了6%。消融实验发现实例级语义信息相对像素级语义信息更易被学习,语义注意力网络能有效促进多任务学习框架下的特征融合,从而验证了算法思想的有效性。此外设计了遮挡因素分析实验,测试了MTOFD在不同遮挡因素下的检测能力。实验结果表明MTOFD在遮挡大小、遮挡纹理变化下检测能力较好,在遮挡角度变化下则表现不够理想。(4)在Wider Face和MAFA数据集上进行了基于知识蒸馏的遮挡人脸检测模型轻量化实验。结果表明TSDKD的差异实例生成模块优越于采用传统特征蒸馏的方法,更适合多任务框架下的人脸检测。在嵌入式平台上的实验表明,TSDKD训练的遮挡人脸检测模型的规模、速度分别为1.8MB、21FPS,在MAFA遮挡子集上达到63%的准确率,比轻量级网络提升了35%。
其他文献
5G技术、物联网、大数据、云计算和人工智能等互联网技术的出现,推动信息化的发展进入大数据时代。面对海量数据的浪潮,决策问题在大数据背景下往往呈现出多样性、模糊性以及复杂性。如何完整表征这些复杂信息并对决策评价进行合理地聚合,是现代决策理论与方法领域中的一项重要研究课题。模糊集理论作为决策理论研究中处理不确定性的一种强有力的数学工具,在处理不确定信息方面具有独特的优越性。在大数据背景下,为使多属性决
学位
显著性目标检测是模拟人类的视觉特点提取单幅图像中最感兴趣的物体,即显著性物体。基于深度学习的协同显著性研究旨在检测多张图像中同时出现的显著性物体。该任务存在两大难点:(1)如何针对不同视觉场景中的不同物体得到鲁棒的特征表达。(2)如何通过这些特征表达进一步建模同组图像的共识关系,利用组内语义一致性来提升协同显著性检测的性能。现有的协同显著性研究对上述难点进行了深入研究,但因实际检测场景受到遮挡、形
学位
分类是机器学习领域的一个重要课题。随着数据获取技术的快速发展,高维数据集越来越普遍,但并不是所有的特征都与分类目标相关。不相关和冗余的特征甚至会降低分类性能。特征选择作为数据挖掘和机器学习中一种重要的数据预处理方法,旨在选择较少的相关和非冗余的特征,以获得与使用所有特征相似甚至更好的分类性能。特征选择本质上是一个NP难问题。随着维数的增长,搜索空间呈指数增长,因此进行穷举搜索是不切实际的,而元启发
学位
随着互联网技术的飞速发展,多媒体通信成为人与人之间交流的主要方式之一,在人类生活中有着广泛的应用。数字图像作为互联网上用户量最大的、传播速度最快的媒体之一,在传输过程中的信息安全以及版权保护问题也随之而来,因此如何保护数字图像在传输过程中的安全性问题已经成为了信息安全领域的研究热点之一。为了保护图像在传输过程中的安全性,研究者将图像加密与信息隐藏两者的优点结合起来提出了许多密文域信息隐藏算法,成为
学位
文献检索、文献筛选、文献质量评估、数据提取等Meta分析过程中均存在报告偏倚。报告偏倚主要有发表偏倚、时滞偏倚、多重发表偏倚、地域偏倚、引用偏倚、语言偏倚以及结果报告偏倚七大类,其中发表偏倚是报告偏倚中最难控制且影响范围最广的偏倚。过分夸大的阳性结果促使发表偏倚对现有的研究进行过度评价,从而丧失科研数据的可信度与真实性,甚至会让后续研究人员做出错误的推断。这种现象不仅浪费科学研究的资源,而且对Me
学位
集成异常检测算法有较强的鲁棒性和泛化能力,能够应用于许多领域,受到了广泛的研究和关注,其中不同个体学习器的结合方式对模型的性能具有显著影响,因此是一个重要的研究主题。传统多数投票法采用投票的方式来确定样本的最后标签,无法充分发挥各个个体学习器的优势,性能往往不理想。本文从个体学习器输出的异常得分之间的联系出发,通过确定最优个体学习器来确定样本的预测标签,提出了考虑结合稳定性的集成异常二次检测算法(
学位
具有单连续变量的背包问题(Knapsack Problem with a single Continuous variable,KPC)是标准0-1KP的自然延伸,可应用于商业、投资决策、资源分配、计算复杂性理论、密码学和应用数学等领域。KPC的背包容量是不固定的,所以比0-1KP求解更为困难。同时,KPC属于NP-难的混合优化问题,精确算法求解耗时长,不适合求解高维问题。智能优化算法具有思路简单
学位
相对湿度作为表征水汽含量和干湿程度的参量,可反映气候变化对区域水循环的影响。对华东地区相对湿度的气候学特征及其影响因素进行分析,深入了解当地的气候变化规律,对生态系统、生产生活、灾害预测等提供科学参考。本文基于1961-2019年华东地区134个气象站的气象数据,运用线性倾向估计、累积距平、重标极差分析、Mann-Kendall突变检验、经验正交函数法、敏感性分析、偏相关系数等方法对华东地区相对湿
学位
海浪波高影响着工业生产和人们的生活,例如航海、渔业、海上军事活动、海上作业、沿海与近岸工程的规划与设计等都离不开对海浪波高的有效评估。海浪有效波高是直接体现海浪活动的重要指标,从而有必要研究海浪有效的准确预测的方法,利用海浪变化趋势为工业生产和人民生活提供有力保障。较长时间以来,对海浪有效波高的研究主要基于流体力学原理和方法,具有较强的解释性和描述性,但由于海浪波的随机性与不稳定性因素,导致预测精
学位
图像特征匹配是计算机视觉领域中一个基础且关键的问题,其旨在获得给定的两幅匹配图像特征点集之间准确的对应关系,并恢复相应的相机姿态。作为底层视觉通往高层视觉的纽带,图像特征匹配技术在视觉领域有着广泛应用,例如图像拼接、图像检索、三维重建和同步定位与建图等。图像特征匹配本质上是特征点集配对的过程,它是一个复杂的NPC组合优化问题,计算复杂度比较高。而且由于匹配的图像之间通常会存在视角和光照变化、重复结
学位