基于全景视频的目标检测算法研究与应用

来源 :郑州大学 | 被引量 : 0次 | 上传用户:hzxj1817
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着全景视觉在视觉监控、智慧交通、虚拟现实等领域的广泛应用,人们对全景图像中的车辆、行人等目标的检测需求日益增长。全景视频是基于全景图像的高分辨率视频图像,可提供采集设备360°视场范围内的场景信息,具有平面显示和立体显示两种效果。在实际应用中,全景视频图像常被投影为2D平面矩形图像,会出现畸变失真、物体变形等问题,导致常规检测算法无法完整提取到图像内目标的特征信息而造成目标漏检、误检。本文基于以上问题对全景视频中的目标检测算法展开研究,主要工作内容如下:(1)针对等矩形全景视频图像中目标形变及尺寸差异较大的问题,提出了基于可变形卷积和特征融合的全景视频检测模型。在模型主干网络中使用可变形卷积来提高对形变目标的特征提取能力,使用改进路径聚合网络(Path Aggregation Network,PANet)+空间金字塔池化(Spatial Pyramid Pooling,SPP)模块的多尺度特征融合方法,通过加入跳跃连接将原始特征与融合后特征再融合,提高对不同尺度目标的特征提取能力。此外,构建全景图像数据集对模型进行训练和测试,实验结果表明,该模型与其他模型相比具有最高的检测精度和较快的检测速度,能够快速准确的检测到全景视频中的变形目标。(2)全景立体视频经过等矩形投影后为双目全景视频图像,该图像中同一目标的遮挡程度存在差异,针对该问题,提出基于特征融合和注意力机制的全景立体视频检测模型。该模型先将输入的双目全景图像分开送入参数共享的两个特征提取网络,再将特征提取后的两路特征图进行拼接融合,整合两路视频图像中的特征信息,接着通过CBAM(Convolutional Block Attention Module)模块增强对上下两路全景图像中相同目标特征的关注度,最终送入预测。同时,构建双目全景图像数据集并进行标注,对模型进行训练和测试。实验结果表明,该模型相较于其他对比模型更适用于全景立体视频中的检测任务,也证明了模型中使用双路特征融合方式和CBAM模块的有效性。(3)在全景立体视频直播系统的云转发端部署上述全景立体视频检测模型,并在不同场景中进行测试。结果表明,模型检测准确率均在90%以上,部署后系统平均时延为4.3s,验证了该全景立体视频检测模型在系统中的实用性。
其他文献
“三系”配套是棉花生产实践中理想的杂交制种方式,利用含哈克尼西棉不育胞质(CMS-D2)的陆地棉“三系”系统进行杂交制种是棉花杂种优势利用的主要途径之一。但是其不育基因至今仍未被鉴定和验证,其败育分子机制也尚不清楚。因此,本研究首先通过对CMS-D2不育系ZBA进行线粒体基因组测序和组装,并与保持系线粒体参考基因组2074B比较分析,旨在筛选和鉴定ZBA中候选不育基因,并进行初步功能验证。该研究为
学位
随着互联网行业的发展,B2C电子商务平台发展迅速,并通过与本地“前置仓加配送”模式相结合,孕育出一批同城B2C电商平台。电商企业为了从日益激烈的行业竞争格局中脱颖而出,建设优质的供应链体系可谓重中之重,其中以供应商的评价与选择体系的建立尤为关键。首先,论文针对电商企业A公司在供应商引入、评价和淘汰等方面的问题入手,对其供应商评价体系现状进行了全面深入的分析,分析归纳了A公司供应商评价体系中存在的主
学位
人类对自然的开发与利用,除了攫取到大量的生产资料外,还给生态环境和人类自身生存带来了巨大的风险和损害。在很长的一段时间内,我国环境公益诉讼实践旨在对环境损害进行事后救济,忽略了事先预防的重要性。环境损害往往是难以逆转甚至是不可逆转的,为了贯彻预防为主原则、保护生态环境及保障社会公共利益,实现对环境问题的事先预防,预防性环境公益诉讼应运而生,其作用和价值也越发得到重视。作为环境公益诉讼发展的新方向,
学位
本公司的以食品企业的自动化的包装机/线为主要产品。由于劳动力的日益紧缺,对自动化设备的需求快速增长。同时,由于民众对食品安全的关注,迫切需要用天然的方式替代原有的用化学保鲜剂的方式。国家对包装技术和产业的发展的大力支持。因此,公司的产品处于最佳的外部条件。而公司通过这些年的技术积累,以获得了良好的商誉,成为难以被迅速复制的内部优势。但是,由于企业现有的商业模式的局限,企业一直处于小规模的状态,规模
学位
在电化学能量转换过程中,电催化剂决定了整个过程的反应速率、效率和选择性,是影响这些能量转换技术的关键因素。常见的电催化反应包括氧还原反应(ORR)、析氧反应(OER)、二氧化碳还原反应(CO2RR)、氮气还原反应(NRR)、和析氢反应(HER)等,这些反应通常具有较高的过电位和缓慢的动力学。传统的贵金属基电催化剂如钌、铂和铱等,虽然可以加快反应的速率,但这些贵金属的高成本限制了它们的大规模应用。二
学位
现代企业竞争的关键是人才的竞争,人才匮乏仍是当下我国企业发展面临的主要问题之一。由于我国绝大部分企业处于维持生存和求发展的阶段,经营效益偏低,高薪外聘人才不符合我国多数企业实际。因此,加强人力资源管理、通过内部培养和培训人才,成为我国中小型企业提高竞争力、在竞争中胜出的必然选择。构建和完善企业员工培训体系也就成为中小型企业人力资源管理的重要内容。本文通过文献研究的方法,着重梳理了企业员工培训的相关
学位
以农村商业银行(以下简称“农商行”)为主的农村金融机构是中国农村金融的主力军,也是配合国家“乡村振兴”战略的最主要的金融服务机构。农商行具有服务“三农”和实现商业可持续发展的双重目标,伴随我国经济进入新常态,在宏观经济增速下滑、银行业竞争加剧、互联网金融、利率市场化改革基本完成、资管新规出台、客户需求发生变化以及“小法人”内在矛盾等因素的冲击下,我国农商行面临着顺应国家对省联社及全国农信系统的改革
学位
近些年来,在体量庞大且发展迅速的中国经济市场下,未来应收账款叙做保理案件的数量逐年增高,加之当前相关法律规定不完善、国内对保理行业的认知度较低、专业人才缺乏、企业融资渠道较少等问题突出,导致实务中保理合同纠纷频发,且此类案件的二审率颇高,实践中裁判不统一的问题频发等等,引发了一系列问题,如未来应收账款叙做保理的标准如何把握、不同情形下的未来应收账款对保理合同的效力影响、叙做保理后的通知问题、债权转
学位
在国家对优秀传统民族文化传承发展高度重视的当下,笔者作为东兰壮族后代,结合自身民歌演唱与传承方向所学,以东兰壮族武篆调为题,探究东兰壮族武篆调的文化背景与传承方式。自觉承担起作为一名民歌演唱与传承方向学生对民族民歌挖掘、保护、传承的责任与义务。在本论文中,笔者通过详实的田野调查、文件梳理,结合所学专业知识,分三个部分对东兰壮族武篆调的起源、历史沿革进行阐述,对武篆调中音乐要素进行分析,从音乐学、语
学位
胡戈·阿尔芬是二十世纪上半叶瑞典重要的作曲家之一。在近半个世纪的艺术生涯中,他创作的大量作品几乎涉及到当时所有的音乐体裁和形式。他在交响曲这一大型器乐领域的代表作是完成于1898—1899年的第二交响曲。这部作品具有胡戈阿尔芬夫早期音乐的典型风格特征,不仅较为全面地展示了他娴熟的写作技术和成熟的创作理念,同时也是他对人生进行的一系列深刻思考的反映。本文围绕第二交响曲,对阿尔芬早期的创作理念、曲式结
学位