基于深度学习的室内环境感知方法研究

被引量 : 0次 | 上传用户:liongliong421
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
环境感知作为计算机视觉一个重要的研究方向,是实现不同场景理解的视觉任务的基础,是实现室内服务机器人智能化的关键,通过感知周围环境信息可完成服务机器人在室内的导航及其他室内作业。其中,环境感知涉及的目标检测和双目测距技术是本文的研究重点,该技术的应用可帮助室内机器人获取到室内环境中目标物体的位置、类别及距离信息,辅助其更好的进行下一步决策行动。同时,为了使室内服务机器人能更好的完成一些室内常见目标的识别及距离测量,并且考虑到一些较为小型的服务机器人其硬件设备计算能力较弱。本文结合室内服务机器人实际应用需求,针对目标检测技术和双目立体视觉技术在环境感知中的应用,对目标检测技术和双目立体视觉技术进行了深入的研究,完成了轻量化的环境感知系统研究,实现了目标检测与测距功能。本文的主要工作如下:(1)针对室内环境下服务机器人的环境感知,结合实时检测和测距的需求,以及现有实验设备的运行效率,本文以轻量化目标检测为研究目的,选择轻量化的目标检测算法为初始研究算法。同时考虑到室内目标的多样性及检测的准确性,本文从公开数据集COCO2017中提取出几种常见的室内目标,并将其制作为新的数据集作为本文的研究数据,完成目标检测模型的训练及评估。(2)针对目标检测方法,本文以YOLOv5s算法为基础进行改进。为了实现目标检测算法的轻量化并保障检测精度,本文使用主干网络、特征融合层和损失函数三部分改进来完成新模型的建立,并结合本文所用数据集对改进后的目标检测模型进行训练及评估。同时,将改进算法在不同数据集和场合进行验证。根据实验结果得到,改进后模型实现了轻量化和精度的平衡,能满足目标检测的实时性和精度要求。(3)针对双目测距方法,本文采用了基于双目立体视觉的目标测距方法。基于摄像机的成像原理和双目立体视觉基础理论,结合本文的实际需求及现有设备选择,使用张正友标定方获取相机的内外参数,完成标定和立体校正。通过实验对比BM和SGBM立体匹配算法的差异,同时结合本文的设备条件,选择了以SGBM算法获取视差图。最后根据视差与距离之间的关系式求得图像中目标的距离信息,根据实验数据分析可得,近距离下,该方法得到的测距结果精度较高,但随着距离的增加,误差开始变大。(4)针对目标检测算法和双目测距方法的融合方法,建立环境感知系统,获取目标位置、类别及距离信息,并在现有设备基础上完成实验。模拟室内服务机器人的工作场景,使用双目相机获取场景,并使用改进后的目标检测模型完成目标检测,同时使用目标检测与双目测距融合的方法完成目标检测及测距。实验结果表明,对于双目相机获取的室内环境下的目标,该模型具有很好的检测性能,也能得到准确的目标距离信息。
其他文献
近年来,伴随乡村振兴战略的深入开展、脱贫攻坚战的全面胜利以及返乡热潮的推动下,农村美景、美食以及风土人情等在社交媒体上逐渐涌现,广大农村地区受到社会的大量关注。在此背景下,许多渴望在乡村发挥自己才能的人们把目光投向了新农人这片充满机遇的新天地。同时,互联网在农村地区的布局与运用,以及短视频技术的低门槛与可操作性,为新农人群体提供了技术支持和发展平台,抖音“新农人计划”的持续推进更是成为新农人短视频
学位
现代化的头盔显示是一种光、机、电、算多学科融合的技术,在军民两大领域得到了广泛的运用。头盔显示光学系统作为头盔显示设备的核心部分,其光学性能的好坏将直接影响头盔显示设备的显示效果。为了使头显光学系统全彩显示且像质优良、增加人机交互的准确性、提高头显设备的信息获取维度,本文设计了一款以双通道头显光学系统为核心,以视线追踪镜头和场景摄录变焦镜头为辅助的增强型头盔显示光学系统。根据提出的增强型头盔显示光
学位
实效性是高校思想政治教育的价值源泉和生命所在,是衡量高校思想政治教育成败的标准和尺度。习近平总书记在全国高校思想政治工作会议上提出的“因事而化、因时而进、因势而新”的“三因”理念便是高校思想政治教育实效性重要性的体现。十八大以来,以习近平同志为核心的党中央对推动传统媒体与新兴媒体融合发展做出了多次部署,表明媒体融合已成为大势所趋、时代所向。融媒体是理念媒体,是一个融传媒与受众互动于一体的崭新信息传
学位
农业兴则饭碗牢,农村稳则社会安,农民富则国强盛,在广阔的农村战线上,农村党员队伍既是推进乡村振兴战略的“先锋部队”,也是乡村振兴过程中的参与者,更是农村基层党组织工作中的骨干力量,加强农村党员思想政治教育工作对于全面推进乡村振兴、加快农业农村现代化具有重要意义。在乡村振兴背景下农村党员只有不断的提高自身的综合素质,才能够满足乡村振兴所提出的新要求,从而增强农村基层党组织的战斗力。随着乡村振兴战略的
学位
气流的扰动会对火炮的精确打击有着十分重要的影响,尤其是较为复杂的低空风切变,其不仅会影响火炮弹丸的射程和侧偏距离,还会对弹丸的飞行高度和炸高产生较大的影响。本文以我军炮兵主战装备155 mm大口径高膛压火炮为研究对象,为研究低空切变气流对火炮射击精度的影响,构建两种类型的低空风切变气流,分析其对火炮外弹道的影响,并建立了一种火炮弹丸落点修正系统,对其实验数据进行对比分析。针对山地低空切变气流的特性
学位
随着战争武器的迭代更新,传统电镀铬工艺所制备的火炮内膛防护膜层脆性大、裂纹多、附着力弱,已无法满足新代火炮高弹药量、高威力、远射程的需求。在火炮发射过程中,烧蚀氧化导致的内膛侵蚀及弹药颗粒导致的冲刷磨损已成为限制火炮总体性能和使用寿命提升的重要因素。因此,本文采用电弧离子镀技术在特种钢表面制备了一种抗磨损能力强,抗高温性能良好的厚铬膜,并通过实验设备模拟火炮工作时内膛表面恶劣的工况条件,以此来评估
学位
数控机床被称为“工业母机”,它的发展和应用不仅是衡量一个国家制造业水平的重要标志,也是衡量工业水平能力的重要标杆。数控机床在工业领域应用广泛,由于其工作环境差和工作量大等原因,造成数控机床故障频发,而数控机床一旦出现问题,很难在短时间内排查出故障并维修,对工厂的生产任务产生较为严重的影响。为减少数控机床的故障发生效率,确实提高数控机床的工作效率,故通过健康状态评估方法对数控机床展开进一步研究。(1
学位
随着时代不断进步,物流运输业蓬勃发展。在物流运输中,货物受到一些人为的或不可预期的原因而发生事故的情况时有发生,特别是精度要求高、成本昂贵的重要机械设备,环境因素对于机械设备运输中的安全质量会产生重大影响,因此,设计一种能够监测重要机械设备运输过程的环境参数,记录运输过程信息,并对关键参数进行数据处理,以获取设备状态的设备运输状态监测系统是十分必要的。本文围绕重要机械设备运输全过程状态监测终端系统
学位
随着智能化车间和生产线的发展,冗余双臂机器人广泛应用于自动化装配、军事及医疗领域,其仿人性和高协调性都是单臂机器人无法比拟的优点。双臂机器人依据手眼视觉和软件控制系统之间的协调,可以完成工业生产中工艺步骤重复性高、需求较大的工件抓取和装配任务作业,但目前视觉伺服控制尚未发展成熟,在装配过程中仍借助外部设备辅助完成作业,在准确性和信息融合中存在一定误差。为了实现工件在复杂背景中的装配作业,本课题利用
学位
高温环境下的压力测量在航空航天、船舶海洋、能源勘探和石油化工等多个领域中有着广泛需求。在这些需求中,压力测量通常会受到极端高温环境的影响,引起测量偏差或使传感器无法工作。而光纤双法珀腔传感器耐高温、抗电磁干扰能力强,能够实现温度与压力的同时测量。本文对双法珀腔传感器的解调技术进行研究,在实现对双法珀腔腔长的高速度、高精度解调的同时研究双法珀腔高温压力传感器的温度漂移补偿方法,解决由温度耦合效应引起
学位