机器人室内场景规则体视觉感知及重建研究

来源 :陕西科技大学 | 被引量 : 0次 | 上传用户:yuwen0702
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着机器人领域的不断发展,机器人已经广泛的应用于生产生活各个方面。准确的场景地图是机器人与环境进行有效交互的保障,场景地图构建已成为热点问题。同时定位与构图(Simultaneous Localization and Mapping,SLAM)技术在场景地图构建方面应用广泛,虽取得了一定的进展,但是构建的场景地图不含语义信息,地图精度不高,存在深度信息缺失和闭环效果不佳等问题。针对以上问题,本文将规则体信息应用到地图构建中,设计了融合规则体信息与RGB-D SLAM的室内场景语义地图构建方案,借助规则体语义信息与三维模型提高场景地图的质量。本文主要研究工作如下:(1)通过深度学习与传统方法融合完成规则体检测及边缘提取。首先,通过COCO数据集对YOLO目标检测模型进行训练,得到目标检测模型,利用该模型对包含规则体的图像进行检测;然后,利用检测结果将图像分割为仅包含单个物体的图像,使用HED网络进行边缘提取,得到较为准确的物体边缘;最后,结合Canny边缘检测进行优化,得到规则体重建所需边缘信息。(2)通过单张图像中规则体的边缘信息和几何约束完成规则体建模。主要实现了长方体、回转体、球体以及广义圆柱体和广义立方体的建模。建模方式简单高效,可以快速完成建模。对于长方体建模,借助边缘检测所得二维检测框和消失点求解顶点坐标,再结合相机参数求解三维坐标。对于回转体,结合回转体在成像后存在的几何约束,对回转体上下底面形成的椭圆进行拟合,以此为基础逐步求解并矫正生成曲线与对称轴。对于球体,通过在投影图像中选取投影圆上的三个点作为先验,求解圆心及半径,进而结合相机参数求解球心及球体半径。对于广义圆柱体和广义立方体,利用边缘轮廓信息获取底面与侧面轮廓,确定对称轴,然后将底面沿着对称轴进行扩展,从而完成建模。(3)融合规则体信息进行场景地图构建。首先,设计融合规则体信息的场景地图构建总体框架;其次,提出规则体尺度与位姿估计初始化方法,利用帧间匹配进行尺度与位姿的初始估计。在初始位姿的基础上,借助深度数据对规则体尺度和位姿进行优化;最后构建完整的融合规则体信息的场景语义地图。实验结果表明,本文提出的融合规则体信息的场景语义地图构建方法,可以用在室内场景地图构建中,构建的地图包含特定规则体的语义信息与形状信息,相比于传统点云地图,包含规则体语义信息,地图更加完整,适用于更高要求的应用场景,在机器人室内场景服务与环境感知中具有一定的实用价值。
其他文献
互联网技术的不断发展让人们越来越多的依赖网络进行搜索自己需要的信息,其中搜索引擎作为筛选海量信息必不可少的工具,重要价值也在不断凸显。在这个背景下,不少企业开始注
新时代网络思想政治教育面临着新的机遇和挑战,其中建构新时代网络思想政治教育话语体系成为确立网络意识形态主导权,影响网络思想政治教育针对性、实效性的重要因素。新时代网络思想政治教育话语体系的内涵、结构、特点是什么;为什么要建构新时代网络思想政治教育话语体系;怎样建构新时代网络思想政治教育话语体系等一系列理论和实践问题值得我们深入思考。本文针对上述问题进行了初步探讨,目的在于厘清新时代网络思想政治教育
友善是个体真情、善意、美好品德之合理表达的高尚品质,同时也是由己及人、推己及物的道德规范,主要是在习得的基础上,通过个体的自我更新、自我完善、自我发展来养成和维护的。引导大学生培育和践行友善观,不仅能引导大学生提升尊重、宽容、诚信、关爱等道德素质修养,而且有助于帮助大学生树立积极的道德观念,培养有担当、有品位、有善心、有格调的自媒体活动人。青年是一个民族和国家的希望,大学生作为青年群体中最优秀的群
背景左乙拉西坦(Levetiracetam,LEV)是一种新型抗癫痫药物,近年来已被证明具有改善认知的作用。海马theta振荡(4-12Hz)与认知相关的行为如探索、运动和空间记忆有关。LEV对海马theta振荡的影响尚未见报道。目的研究LEV对大鼠海马CA3区theta振荡的诱导及其机制,LEV对整体动物海马theta振荡相关嗅探行为的影响。方法离体脑片研究LEV诱导海马CA3区脑片theta振
卵泡闭锁(Follicular atresia)主要是由卵巢颗粒细胞凋亡引起,卵巢颗粒细胞凋亡是影响卵泡闭锁的重要因素。Bmi1基因属于Polycomb家族成员之一,是一种原癌基因。先前研究结果
视频聚合行为从萌芽到壮大逐步打破了视频作品原有的传播形式,模糊了链接服务与内容提供之间的界限。目前,理论界和实务界对视频聚合行为的探讨众说纷纭,视其为不正当竞争行
目的:既往研究表明,血清谷丙转氨酶(ALT)或血清尿酸(UA)与胰岛素抵抗、脂质代谢、氧化应激等密切相关,但是并不知道ALT联合UA对Mets及其组份的影响。此次研究的主要目的是为
“政府与社会资本合作模式”作为公共服务供给模式的重大创新,能够充分发挥政府与社会资本双方不同优势,从而成为公共服务的主要供给方式。PPP项目自身体量巨大所带来的高额
研究目的:探讨[18F]脱氧葡萄糖正电子发射断层显像/计算机断层扫描([18F]FDG-PET/CT)对多发性肌炎及皮肌炎的诊断价值。方法:(1)选取2013年10月至2016年8月天津医科大学总医院
中国画艺术所表现出的特点不是对客观的摹拟与再现,而是追求生命本体的精神追求,而这一追求正是工笔花鸟画中线所体现出的魅力与审美价值所在。这一独特的审美价值充分展现出了中国画的民族文化内涵。线可以理解为工笔花鸟画的骨架,同时承担着艺术表现与统领全局的作用,对于骨架的认识与研究,直接影响工笔花鸟画创作。本文尝试通过对线在工笔花鸟画中的表现与审美的研究,结合本人自身研究生期间艺术创作的实践与感悟,归纳总结