基于深度学习的人脸视频心率检测技术研究

来源 :南京理工大学 | 被引量 : 0次 | 上传用户:zhujiang_doctor
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
心率作为人体最重要的生命体征,随着生活质量的提高越来越受到人们的关注。目前广泛使用的心率检测设备在使用上具有局限性,无法满足持续检测。基于人脸视频的非接触式心率检测相比之下更具优势,应用前景更为广阔。大多数研究局限于某种特定场景的心率检测,如静止状态、头部轻微运动和光线变化等。由于日常生活中场景较为复杂,存在人脸旋转、面部表情等情况,对提取的r PPG信号产生干扰,因此需要进行深入研究。深度学习的兴起给非接触式心率测量带来了新的研究方向,进一步提高了非接触式心率检测的准确率。本文研究重点是基于深度学习的人脸视频心率检测技术,工作内容主要包含以下几点:(1)使用Dlib进行人脸关键点检测,在人脸检测的基础上增加预判断模块优化ROI区域选取,有效减小了由人脸转动时人脸检测器引入背景噪声的影响。对比分析了整个面部、脸颊和额头三个不同区域对提取r PPG信号的影响,验证了脸颊区域提取的r PPG信号信噪比最高。(2)对从ROI提取的原始r PPG信号进行多种预处理。首先分析摄像头拍摄帧与帧之间时间间隔不均匀对r PPG信号的影响,并通过线性插值然后等间隔抽取方式重构出均匀采样的信号。其次进行L1去趋势滤波,去除重构的r PPG信号中趋势成分和心率对应频率以外的干扰信号。最后加入相位追踪模块,对去趋势滤波后的信号优化成类正弦信号,使得时域上信号周期性更强,频域上心率对应的频率更突出。(3)对预处理后的r PPG信号,从时域和时频域角度分别生成特征图像,构建卷积神经网络进行训练和预测。在时域上,将三种不同算法提取的r PPG信号分别作为图像的单通道并进行叠加;在时频域上,将信号对应的时频图作为r PPG信号特征图。实验结果表明时域特征图在Res Net18网络中加入注意力机制时预测效果达到最优(MAE=4.81,RMSE=6.44,ρ=0.85),并验证了信号预处理部分的重构等间隔均匀采样信号对预测结果有明显提升(MAE下降6.59,RMSE下降7.67)。此外,实验表明信号时长对预测结果有一定影响,20s信号构造特征图效果略优于10s信号构造特征图效果。
其他文献
间隙波导是近些年新兴的一种传输线结构,利用周期性电磁带隙(EBG)结构,抑制特定频段内电磁波传播,消除了电磁泄漏。由于它不需要电接触,而且是全金属结构,所以加工方便、损耗极低、带宽大,十分适用于毫米波等高频段。本文基于间隙波导技术,设计了多款间隙波导微带馈电网络,具体研究内容包括:1.对间隙波导结构进行分析。对构成间隙波导的EBG单元结构进行研究,分析了矩形销钉各项参数对阻带的影响,在此基础上设计
航空航天技术的迅猛发展对新型高温结构材料的服役性能和加工性能要求日益提高,经过三十余年的发展,综合性能优异的Ti2AlNb合金的传统加工技术逐渐成熟,有望在650℃至800℃范围取代目前的镍基高温合金,应用在航空发动机叶片等场合。但多曲面叶片结构的传统制造加工难度很大,以选区激光熔化技术(SLM)为代表的增材制造技术为此提供了全新的解决途径。本文以名义成分为Ti-22Al-25Nb的Ti2AlNb
随着微纳技术和微纳制造工艺的飞速发展,表面微纳结构在各种固体和真空光电器件领域得到了广泛的应用,有望成为提升电子源领域GaAs光电阴极性能的突破口。本文围绕光电阴极光电发射理论、量子效率理论、场发射理论、真空沟道光电阴极的制备工艺等方面开展了深入的研究,设计了一种能实现吸收增强的结构,并分析光电发射性质,从理论仿真和结构设计的角度探索提升GaAs光电阴极性能的方法,通过实验研究激光功率及脉宽对电子
与红外及可见光相比,毫米波探测精度高、穿透力强、抗干扰能力强,具有全天时全天候工作的能力,在水面目标的识别与探测方面具有独特的优势。不同水面目标的毫米波辐射特性之间存在明显差异,研究水面目标的毫米波辐射特性具有较大的应用前景。基于此,针对水面目标的实时监控及污染预警这一应用场景,本文主要研究内容如下:(1)介绍了毫米波辐射理论、辐射计系统及定标技术的基本原理,根据毫米波在不同媒质中的传递特性,对不
近年来,说话人识别作为重要的生物认证技术之一,已得到广泛应用。自引入高斯混合模型,静音环境下的说话人识别技术得到一定提升,但在实际应用中,背景噪声、语音时长有限等因素,限制了GMM模型的性能。目前,短语音说话人识别技术仍是语音信号处理领域的难点之一。针对该难点,本文主要从特征选取及模型构建上对短语音说话人识别方法进行研究,并将该方法应用在两人同时说话时混合语音的分离过程中。研究的主要内容包括:(1
EBAPS属于真空固体混合型微光器件,具有高灵敏度、高信噪比、低功耗、可数字化的优点,是目前数字微光夜视领域最具发展前景的方向之一。EBAPS需要在高压条件下工作,而固定高压下的EBAPS成像难以满足宽动态范围成像的要求。因此,对EBAPS进行可变高压控制,是实现EBAPS宽动态范围成像的有效手段之一。为此,本课题对可变高压下的EBAPS宽动态成像技术进行了深入研究。本文首先对微光夜视技术发展概况
本文主要讨论了透明物体表面形状的三维重建问题。如今,随着计算机技术的持续发展,计算机视觉和图像处理方面的技术也得到了迅猛提升。三维重建技术作为计算机视觉和图形学的重要分支一直都是该领域的研究热点,该技术在人体医学、建筑工程、智能导航和虚拟现实等领域有着广泛的应用,而对透明物体的立体重建是三维重建中为数不多的开放性问题之一。本文提出了一种将光的折射原理与双目视觉系统相结合的方法,同时运用BP神经网络
由于微带栅格阵列天线具有结构紧凑,增益高,馈电简单等优点,因此在微波和毫米波领域广泛应用,特别是汽车防撞雷达。本文基于汽车防撞雷达的应用背景,围绕宽带和圆极化两个方向,对K波段微带栅格阵列天线展开研究。主要研究内容如下:1、设计一款经典的微带栅格阵列天线,引入枝节来改善匹配,移除阵列边缘长边以降低副瓣电平。然后将该栅格阵列与切比雪夫阵列进行较为全面的比较和分析。结果表明,与切比雪夫阵列相比,微带栅
生活垃圾是放错了地方的资源,有效的垃圾分类策略不仅可以起到保护环境的作用,而且还能实现垃圾的回收再利用,具有很高的经济效益。我国的垃圾处理厂对垃圾的分类处理目前还处于手工分拣阶段,这不仅造成工人的劳动量大、分拣效率低等问题,而且还会出现垃圾错分等现象。近年来,随着深度学习技术的不断发展,有效地提升了目标检测与识别的精度,并且深度学习具有自主学习的能力。因此,本文提出了一种基于改进YOLOv3(Yo
天线作为无线通信系统的窗口,承担着发射和接收电磁波的重任,对其性能的要求也随着系统多功能、集成化和小型化的发展趋势而日益严格。近年来,由于战场环境的复杂和信息科技的飞速发展,对飞行器搭载天线的研究也面临诸多挑战。一方面,为实现扩频通信对抗电子干扰,传统的多副窄带天线方案已不再适用,迫切需要研究具有载体共形、超宽工作频带、小型化特性的天线;另一方面,在相同的发射系统下要获得更大的目标探测范围需要天线