基于全景图像的室内物体分类检测

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:qinyongj
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
虚拟现实已经走进人们的生活,给用户带来沉浸式的感受。对于房地产行业,传统的网上看房模式只能看到房源的局部平面信息。如果利用虚拟现实技术对房屋室内信息进行全景构图,用户可以全方位立体式地查看房源信息,并通过佩戴VR设备更加便捷地实现室内漫游,与室内物体进行智能交互。目前全景图像获取复杂,图像检测识别的研究主要集中在传统图像上。本文为了解决这些问题,设计了一套一键式的全景采集设备,并实现了全景图像中室内物体的检测与分类。通过对全景拼接技术的深入研究,本文给出了一套全景图像采集系统的设计方案,并将整个系统分为图像获取、图像拼接和全景交互三个部分。设备通过三个鱼眼摄像机利用多线程同步技术获取环境实景图像,经过鱼眼校正、图像配准、图像拼接以及图像融合等过程实现全景图自动生成,通过网站服务器实现了全景图像的展示、分享以及数据的保存。最终在嵌入式平台上完成整个采集系统,实现一键式获取全景图像,具有价格低廉、操作简单、便携的特点,实际产品投入使用也验证了系统的稳定性和可靠性。关于全景图像中物体的分类与检测问题,考虑到全景图像中物体会随拍摄角度和拍摄位置的变化产生随机变形而给识别带来很大的难度。本文采用深度学习的方法,利用卷积神经网络提取特征的优势,建立了基于候选区域的物体分类检测系统,通过共享特征提取网络完成候选区域的生成与物体的分类检测两个任务。具体方法是以全景图像作为输入,深度卷积神经网络进行特征提取,候选区域网络利用提取的特征生成目标的候选区域,对每一个候选区域采用特征映射机制以及空间金字塔池化技术得到归一化的特征向量,经物体分类检测网络完成对每个候选目标框的类别判断以及位置精修,最终通过非极大值抑制算法输出检测到的物体类别与位置。大量实验结果验证了整套分类检测系统的可行性和算法的有效性,在我们搭建的全景图像测试集上,全景图像室内物体目标检测的平均准确率达到了68.7%。
其他文献
目的:了解临床药师在癌痛控制中的作用。方法:对癌痛患者开展药学监护,发现药物治疗中的问题,优化给药方案,开展用药教育。在进行为期1周的药学监护后,比较患者疼痛评分、疼
目的分析急性脑血管意外患者肺部感染的相关因素,并探讨防治对策。方法对我院2006年5月—2009年4月住院的脑血管意外患者进行肺部感染回顾性调查分析。结果251例脑血管意外患
在中国社会男权制度的影响下,文艺创作中女性的生存困境一直是不能规避的现实问题。曹禺早期的戏剧作品蕴含着鲜明的性别政治叙事特征。他将叙事视角放在女性角色身上,通过展
类风湿性关节炎(RA)是一种病因尚未明确的慢性、全身炎症性自身免疫性疾病,发病机制非常复杂,遗传、环境和免疫因素可能共同发挥作用。免疫功能失衡尤其是CD4+T细胞中的辅助T
在现代经济社会,物流长期以来一直被称之为企业的第三大利润源泉,在不少企业中,物流成本占了企业销售额的大部分比例,因而,加强物流活动管理的关键是控制和降低企业各种物流
建立科学的国有资产监督管理体系,是中国经济体制改革进程中的重要课题,是探索社会主义公有制形态与市场机制对接、寻求科学的国有企业监管体系、完善社会主义市场经济体制的
随着国民经济的发展,我国江底隧道项目的兴建日益增多。由于江底隧道相对封闭,车辆在通过隧道过程中,由于自燃和碰撞等原因经常引发火灾,对行人的生命安全和隧道的运营安全造
一、实验内容调整与确定本课是青岛版小学科学三年级(下册)“电的本领”单元中的第一个实验内容。教材在实验设计上主要安排了两个探究活动:一是“手电筒为什么会亮呢”。在
目的探讨卡托普利合并丹参川芎嗪注射液治疗糖尿病肾病的疗效。方法所有患者在常规糖尿病饮食控制及口服降糖药物治疗的基础上,加用卡托普利和丹参川芎嗪注射液进行治疗。卡
<正>商业银行的表外业务是指商业银行所从事的.按照现行的会计准则不记入资产负债表内.不形成现实资产负债.但能改变损益的业务。表外业务因其具有形式灵活、交易集中、知识含量