多任务级联卷积的ZYNQ人脸跟踪设计与实现

来源 :成都理工大学 | 被引量 : 2次 | 上传用户:windamill
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于嵌入式系统的人脸跟踪设计的性能由两个因素决定:(1)人脸检测算法的检测效率与性能;(2)嵌入式系统跟踪平台的灵活性。本设计着手于这两点进行人脸跟踪设计的创新:在人脸检测算法上,设计使用基于多任务级联卷积神经网络的人脸检测算法,该算法使用一套完整层叠式结构,通过精心设计的深度卷积神经网络由浅入深地预测人脸及其面部特征位置,借助人脸检测与人脸对齐之间的内部相关性分析,进一步提高算法性能,有效地解决了人脸检测算法在复杂面部表情、面部遮挡与光线昏暗这三种情况下检测效率低的问题。此外,该算法在进行模型训练的过程中使用了一种全新的在线难例挖掘策略,将样本依据人脸近似度进行归类,进一步提高了检测率。在算法移植到嵌入式的过程中,将人脸模型转换成一种嵌入式端高度优化的NCNN模型,提高了算法在嵌入式系统中的运行速度。在嵌入式系统跟踪平台上,设计硬件采用ZYNQ芯片,其集成了ARM Cortex-A的硬核和Xilinx 7系列的FPGA可编程逻辑,将ARM强劲的事务管理功能与FPGA并行高速运算结合起来,极大的增强了跟踪平台的灵活性。同时,设计使用可编程片上逻辑系统(System On Programmable Chip,下文用SOPC表示)作为系统架构,增加了系统的可重构性,不仅给设计的开发维护节约了时间,还为以后的设计扩展提供了便捷。本设计主要完成了以下工作:(1)本文查阅大量智能监控系统、人脸检测算法与SOPC的资料,通过分析得出一种优化的人脸跟踪设计方案,该方案将基于多任务级联卷积神经网络的人脸检测算法与SOPC架构结合,完成人脸跟踪设计的优化。(2)本文详细介绍了设计使用的人脸检测算法的原理、模型及训练模型使用的深度学习框架,将本设计使用算法与其他经典人脸检测算法进行比较,验证本算法在检测性能上的优越性。(3)完成人脸跟踪设计的硬件与软件平台的搭建:硬件主要完成了核心板与底板及相关器件的选型与焊接及舵机云台的搭建;软件主要搭建了设计运行的嵌入式系统与深度学习的框架并完成了模型的训练与转换与算法的移植。(4)完成人脸跟踪功能的实现,并通过实验得出数据验证了将本设计人脸检测算法与SOPC架构结合后有着更高检测率与更强劲的性能,同时在人的复杂面部表情、面部遮挡与光线昏暗的环境下依然有着良好的检测效果。通过一系列具体的数据及对数据的分析证明了本设计提出的人脸跟踪设计的优化方案具有可执行性。
其他文献
村干部是建设新农村的重要力量,重视对其的管理和激励更有利于发挥工作积极性、主动性和责任心,进而带领乡村社会不断发展,提高群众的生活水平。乡村社会中村干部存在的一些
我对水乡的钟爱,那要追朔到童年时代.那是因为常住在常熟外婆、阿姨家的缘故。常熟当时是富裕的江南鱼米之乡.小桥流水人家,环境宁静,人情温馨。我父母是在常熟相亲、结婚的.我大哥
期刊
在正常生理状态下,哺乳动物细胞持续受到活性氧如超氧阴离子自由基、过氧化氢和羟自由基的攻击,这些活性氧产生于细胞中间代谢线粒体电子传递链,自然界中的射线及某些特定化
目的应用LipiView(?)眼表面光干涉仪测量泪膜脂质层厚度(lipid layer thickness,LLT),比较睑板腺功能障碍(meibomian gland dysfunction,MGD)患者与正常人群的LLT差异,并分析
德江-思南地区处于扬子地台区黔北分区I_1桐梓-沿河小区I_2,早奥陶世桐梓期,扬子地台主要是碳酸盐岩台地,碎屑岩台地仅限于靠近康滇古陆的狭窄地带,至早奥陶世湄潭期,德江-思南地区碳酸盐岩台地大面积减小,碎屑岩面积大为增加,碳酸盐台地消失,具体原因一直有待研究,而位于德江-思南地区早奥陶世晚期整体为碎屑岩台地,完整经历了早奥陶世碳酸盐岩台地消失的过程。本文基于实测剖面、全区域典型薄片,以古地理学、
氢是一种储量丰富的理想清洁能源,是解决化石燃料日趋枯竭和环境污染日益严重问题的重要手段。甲酸是一种低成本的化学制氢材料,具有4.4 wt.%的质量含氢密度,在常温常压下以
实现金属非金属地下矿山安全生产标准化,有利于落实矿山企业的安全生产责任,有效预防矿山事故,使现金属非金属地下矿山安全生产管理水平不断提升。本文针对现金属非金属地下
作为一种新的信息传播方式,自媒体的崛起给大学生思想政治教育带来了无限机遇与启发,但也在一定程度上给大学生的思想和行为造成了消极影响,给高校思想政治教育造成了一定的困难,如何将自媒体和大学生思想政治教育进行有效融合,在此基础上实现大学生思想政治教育的创新发展,持续保证教育的实效性,无疑将成为现今大学生思想政治教育及其研究的着力点。本文基于这一问题而展开,首先,对研究背景及意义、国内外研究现状、研究思
媒介多元化发展让文学创作者、传播媒介主体走向协同共进、多维融合与博弈角力。文学传播主体的这种融合与角力为用户的多元化阅听提供了丰富渠道,使得文学传播客体(受众)的
胡同是北京特有的名片,而以胡同为载体的社区在当前经济快速发展的冲击下,越来越多的问题浮出水面。如何保护社区的环境,改变社区脏、乱、差的局面?如何凝聚社区居民的社区归属感和荣誉感?如何让居民自主参与到社区的事务中?这成为社区的一大难题。随着经济的发展,社区居民不仅仅满足于物质的需求,更多的集中在文化上、娱乐上、精神上等,如何让居民在社区中满足这些需求,也是社区的一大难题。而社区营造则为解决这些问题提