基于深度学习的视频目标检测关键技术研究及应用

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:anmy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来基于深度学习的静态图像目标检测方法取得了显著的进展,但对于视频目标检测而言,若简单地将静态图像目标检测网络应用到视频检测上,则可能因为单帧存在的运动模糊、失焦模糊导致目标在单帧上不能被检测到。此外,由于相邻视频帧之间图像变化缓慢,若每帧图像采用深度神经网络提取来提取特征,则存在计算冗余的情况。因此,基于深度特征流的视频目标检测的网络框架被提出,其只在稀疏的关键帧采用卷积网络提取特征,非关键帧通过光流场将相邻关键帧的特征传播过来得到特征,可以很好地提高视频目标检测的速度。本文在基于深度特征流的视频目标检测网络的基础上开展对牙齿视频目标检测的研究工作,主要工作内容包括:1.在基于深度特征流的视频目标检测网络框架的基础上提出了改进的自适应关键帧算法,根据清晰度和运动位移两个评价标准来选取关键帧,同时采用关键帧前后传播特征图的方式代替只向后传播的方式,减轻检测的抖动问题的同时提高检测准确率;2.提出了改进的目标通道算法,采用IoU+光流的方式将同一目标对象在视频流的不同帧对应的检测框连接起来,相比只计算IoU的方式而言能提高预测的准确率;3.制作牙齿视频目标检测数据集和牙齿视频分割数据集,除了采用数据增强来扩展数据集外,还采用了光流的方式,将牙齿视频目标检测数据集稀疏帧的标注扩展到所有视频帧,使得所有视频帧都有矩形框标注;4.首次在牙齿视频上应用深度学习视频目标检测网络,对视频中每颗牙齿都进行定位或者分割,并通过实验证明将深度学习目标检测网络应用在牙齿检测和分割上能取得良好效果,以及改进的自适应关键帧算法能够很好地平衡检测速度和准确率;5.基于深度学习视频目标检测网络开发了一款牙齿矫正应用软件,通过采用改进的基于深度特征流的视频目标检测算法,在视频中对牙齿进行目标检测,并采用改进的目标通道算法来确定待替换的牙齿在每帧中的位置从而替换上美化后的牙齿模型,能够在平板上向患者展示牙齿矫正后的静态图像和动态视频效果。
其他文献
锌作为细胞中必需的微量元素,在细胞功能的维持中是广泛需要的。除此之外,锌稳态的异常会引起各种健康问题,包括免疫缺陷和感觉功能障碍。以前的研究表明,细胞内锌水平对肿瘤
本论文的研究分两部分。第一部分为多功能纳米材料用于活性氧及光热的肿瘤治疗,第二部分为人LOX家族蛋白的异源表达。本文第一部分主要为多功能纳米材料用于活性氧及光热肿瘤
本文工作围绕时间交织光模数转换(TIPADC)系统,重点研究TIPADC系统的通道失配特性。首先,基于TIPADC系统的基本模型理论,得到多通道TIPADC的等效通道响应,并且发现特定条件下
目的:研究LINC01510和miR-93-5P在胃癌组织中的表达及临床意义。方法:随机收集2017年01月至2018年12月在南华大学附属第一医院胃肠外科经手术治疗后40例胃癌患者标本及临床资料,所有胃癌患者术前均未接受过化疗及放疗且未合并其他恶性肿瘤,标本术后经病理切片证实均为胃癌;40例癌旁正常胃粘膜组织取自距肿块边缘5cm以上的组织。采用HE染色明确胃癌组织的病理类型、明确癌旁正常组织有无
弹性光网络凭借其大容量、高带宽、低时延等优势,极大地满足了数据中心间的互联需求。但是,网络的可靠性也面临前所未有的挑战,任何一根光纤发生故障都会导致海量的数据中心
随着纳米技术的快速发展,它在生物医学、环境工程、工业制造、军事和通信领域有着广泛的应用背景。在纳米尺度下,纳米机器(Nanomachine,简称纳米机)是最基本的功能单元。纳米
新兴业务应用的多样化快速发展,用户需求的逐渐增多导致传输带宽资源有限的骨干网面临着巨大挑战。弹性光网络精细粒度的频谱分配方式可在一定程度上改善网络的传输容量,但其严苛的频谱一致性、连续性等约束条件限制了频谱资源利用率的进一步提升。同时,数据流量的爆炸式增长、网络规模的不断扩大也使得网络中的能耗问题日益严峻,阻碍了未来互联网的绿色可持续发展。网络虚拟化技术允许同一底层网络上运行多个相互分离且异构的虚
目的:目前,白细胞介素17(interleukin17,IL-17)与多发性骨髓瘤(Multiple Myeloma,MM)的发生发展之间的关系仍存在一些争议,本研究拟探究IL-17与多发性骨髓瘤的发生发展及疗效之间的关系。方法:根据纳入标准选取2016年1月-2018年12月收治于邵阳市中心医院的多发性骨髓瘤患者68例作为观察组(MM组),随机选取同期在邵阳市中心医院体检中心体检的健康者29例作
无线电技术近年来发展迅猛,天线的极化信息对于后续的信号处理是一种十分有用的无线资源。极化敏感阵列因为其特殊的阵列结构,不仅可以接收到信号的基本信息,还可以获得信号
未来5G移动通信网络高速率、低时延的性能要求,以及各种移动智能终端设备爆发式增加,共同导致了移动通信网络数据流量的指数增长。与此同时,有限的授权频谱几乎已经被占用殆