多路监控视频与三维虚拟场景的融合方法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:liedh123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在深化安全建设、完善社会治安立体化防控体系的要求下,监控系统作为一种网格化管理的有效安防方案,正朝着全方位、超高清的方向发展。而随着监控相机布控数量不断增加,传统的多屏切换播放方法逐渐暴露出内容离散、相关性弱等缺点。这为用户添加了对时空信息的认知负担,并且无法满足智能监控多维度、立体式的可视化需求。本文针对如何实现多路监控视频的有效整合与直观可视化这一亟待解决的问题展开了研究,结合增强虚拟现实技术,通过多路监控视频与三维虚拟场景的虚实融合,以及基于视点相关的视频调度,实现了全方位立体实时动态监控的可视化。本文的研究工作如下:(1)面对监控系统的三维可视化需求,本文设计并构建了一个网页端虚实融合的监控可视化系统,并研究了基于增量式运动恢复结构的相机注册方法。该系统共包含四大模块:一是视频采集模块,用于获取仿真平台或真实场景的视频数据流;二是预处理模块,用于生成运行系统所需预先读取的配置文件等;三是视频传输模块,用于编码推流、转封装推送以及终端视频数据流拉取;四是融合显示模块,用于展示实时监控视频虚实融合效果。同时,针对预处理模块中涉及的相机注册问题,实现了一种基于增量式运动恢复结构的相机注册算法,并通过实验验证了算法的有效性。(2)针对单一虚实融合显示方法不能兼顾可视化效果与渲染性能的问题,本文研究了一种基于混合策略的监控视频与三维场景虚实融合的显示方法。首先分析了基于纹理映射、阴影投射、以及深度信息的三种可视化算法,阐述了各个算法相关原理和实现流程,并进行横向对比实验与分析;然后提出了基于混合策略的融合显示方法,结合相机的注册位姿与投影环境的平整度,根据不同算法的适用条件来选择合适的显示方法,以实现可视化效果与渲染性能间的平衡。(3)针对多路视频流融合显示时渲染性能降低及资源占用冗余的问题,本文研究了一种视点相关的视频数据调度方法。该方法包含了三部分:一是基于四叉树的可视域节点裁剪,实现了三维空间内视频节点预划分以及运行时可见节点的有效裁剪;二是基于多分辨率多细节层次的视频数据调度,实现了对于可见节点基于屏幕空间误差进行细节层级判断,以选择调用恰当分辨率的视频数据流;三是多视频拼接及透明度检测渲染,实现了相邻重叠视频间边界自然过渡的视觉优化效果。最后,通过多种实验场景下的实验,展示了多路视频流与三维虚拟场景的虚实融合效果,验证了算法的有效性与流畅性。
其他文献
在信息化时代,电子病历有着传统纸质病历无可比拟的优势,从而被广泛应用。在我国,已有超过96%的医院开展了医院信息系统建设工作。电子病历记录着患者就诊过程的全部数据,对于医疗机构和第三方而言,均有较高的应用价值,但对患者而言,具有高度的生理和心理敏感性。医疗机构作为电子病历数据的采集方、保存方和应用方,任何的技术欠佳和管理不当都可能产生规模性的隐私侵犯案件。一旦患者的电子病历隐私遭受侵犯,导致患者的
学位
报纸
随着航空航天,交通运输和国防、军事工业的发展,业界对铝合金的强度、塑性和尺寸稳定性提出了更高的要求。传统铝合金存在强度低、尺寸稳定性差、不耐高温等缺陷,因此急需开发强度高、塑性好、尺寸稳定性高的新型铝合金材料。纳米金刚石(nanodiamond,ND)既具有金刚石高硬度、高强度和低热膨胀系数的优势,同时又具有纳米材料尺寸小,比表面积大,表面能高和表面易修饰等优良特性,是一种颇具应用前景的铝基复合材
学位
毫米波频段通信是5G技术的重要组成部分之一,提供更快的上下行速度,更宽的带宽,更低的延迟以及更少的干扰,是未来无线通信的重点发展方向。相控阵天线因波束的灵活跳变被广泛应用于卫星通信、蜂窝移动通信、目标跟踪系统等方面,宽角扫描毫米波相控阵天线是5G、6G通信系统的研究热点。然而目前的相控阵天线大多只能在±45°范围内扫描,并且时常伴随着4-5d B的增益波动,本文针对相控阵天线的波束扫描能力以及增益
学位
目前学界为数不多的将经典叙事学运用于翻译批评的研究,多聚焦于叙事视角、话语呈现方式、讲述与展示、叙事时间、不可靠叙述、叙事距离6个元素,而且留有很多深入研究的空间。这在理论和实践上都难以满足译本全面的叙事翻译批评需求。本文又提出叙事空间、隐含作者、元叙事、易读性与可读性、叙事结构、叙事功能6个元素。通过运用跨学科移植法和“规定+描写辩证批评法”,我们建立一个包括上述12个元素以及相应详细考察要点的
期刊
报纸
5G通信产业本身对于频率源的准确度和稳定度的要求很高,使用中国北斗卫星导航系统(Bei Dou Navigation Satellite System,BDS)信号驯服恒温晶体振荡器(Oven Controlled Crystal Oscillator,OCXO)改善恒温晶振输出频率的老化漂移和稳定漂移的技术是解决部署问题的关键。如何提升恒温晶振在失去锁定后的保持能力成为至关重要的问题。本文研究提
学位
随着电子数据采集设备的普及,每天都有大量的信号序列数据通过网络传输的方式,源源不断的输送到数据终端。这些采集到的序列数据里,相邻事件之间可能存在某些必然的联系,揭示设备中事件的发生规律。近年来,计算设备数据处理能力的提升,使得人们从海量序列数据中,挖掘出频繁出现的序列情节片段成为可能。如何对序列信号数据进行高效的频繁情节挖掘,发现序列信号中潜在的规律信息,引起学术界的持续关注。与序列模式挖掘不同,
学位
深度卷积神经网络模型已经成为图像分类应用的基石,在生物认证、智慧医疗、自动驾驶等场景中发挥重要作用。近年来,对抗样本揭示了卷积分类模型的脆弱性,向模型的安全性提出了严峻挑战。攻击者通过在原图像素上添加扰动生成对抗样本,令模型错误地判断图像类别,但对于人类视觉系统而言,对抗样本和原图的类别一致。然而,由于神经网络工作机理的高复杂性和不透明性,至今无法提出一步到位的方法使模型产生免疫。因此,以增强模型
学位
在行人检测领域,基于卷积神经网络的深度学习技术已经取得了比传统方法更好的检测性能。但随着深度卷积神经网络的迅速发展,检测模型的网络结构也愈加复杂,参数量和计算量快速增加。在计算资源有限的硬件设备部署行人检测模型时,如何在保证检测精度的条件下满足检测实时性的要求就成为亟需解决的问题。本文围绕基于锚框的单阶段行人检测方法展开研究,针对在计算资源有限的硬件设备实现行人检测任务所面临的实际问题,结合轻量化
学位