基于视觉检测的多机器人相互定位技术

来源 :南京理工大学 | 被引量 : 0次 | 上传用户:wusyun
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在现代社会,移动机器人在人们日常的生活和工作中,发挥着日益重要的作用,在很多情况下单个机器人已经无法满足任务需求,因此多机器人之间的协同作业任务显得尤为重要,那么如何获取多机器人之间的相互位置关系是完成协同作业任务的第一步。针对多机器人协同任务,本文采用基于深度学习的方法研究多机器人之间的相互定位问题,尤其准确地获取机器人之间的相互位置关系从而使得多机器人协同任务更加精准、可靠。使用深度学习的方法获取多机器人之间的相互位置,首先需在二维图像中采用目标检测模型检测出目标机器人,从而获取到目标机器人在二维图像空间中的坐标,然后对检测到的目标机器人进行跟踪以获取其移动过程中像素点位置。为了获取到目标机器人在三维空间中的深度信息,我们设计了一种无锚箱的基于鸟瞰图的三维目标检测模型,在雷达点云数据中进行机器人的三维目标检测,从而能够获取到目标机器人在三维场景中的位置和方向,对跟踪目标做进一步的位置感知。本文的主要内容包括:(1)针对多目标跟踪中的身份切换(IDSwitch)等问题,设计了一种重要方向加权的轨迹匹配方法,来减少因交叉运动、长时间消失等原因产生的帧间目标匹配错误。本文使用开源数据集对比并且验证了方法的有效性和实时性。然后制作并且训练了实验室机器人的数据集,实现了多机器人在二维平面的位置检测及跟踪。(2)设计了一种轻量级的基于鸟瞰图的点云目标检测网络。在YOLO_V4的基础上,保留高分辨率特征图作为主干网络的输出,使用特征金字塔和空间金字塔池化融合不同大小的特征图,去除多尺度输出,重新设计了一个无锚箱头部检测器。该模型在KITTI数据集上取得了较好的检测结果,在嵌入式平台上的运行速度达到11FPS。(3)对相机和雷达进行联合标定,通过设计的联合检测策略对二维图像和点云鸟瞰图的检测结果进行数据融合,之后设计了多机器人相互定位系统,最终实现了相机和激光雷达的联合检测定位。
其他文献
近年来,说话人识别作为重要的生物认证技术之一,已得到广泛应用。自引入高斯混合模型,静音环境下的说话人识别技术得到一定提升,但在实际应用中,背景噪声、语音时长有限等因素,限制了GMM模型的性能。目前,短语音说话人识别技术仍是语音信号处理领域的难点之一。针对该难点,本文主要从特征选取及模型构建上对短语音说话人识别方法进行研究,并将该方法应用在两人同时说话时混合语音的分离过程中。研究的主要内容包括:(1
EBAPS属于真空固体混合型微光器件,具有高灵敏度、高信噪比、低功耗、可数字化的优点,是目前数字微光夜视领域最具发展前景的方向之一。EBAPS需要在高压条件下工作,而固定高压下的EBAPS成像难以满足宽动态范围成像的要求。因此,对EBAPS进行可变高压控制,是实现EBAPS宽动态范围成像的有效手段之一。为此,本课题对可变高压下的EBAPS宽动态成像技术进行了深入研究。本文首先对微光夜视技术发展概况
本文主要讨论了透明物体表面形状的三维重建问题。如今,随着计算机技术的持续发展,计算机视觉和图像处理方面的技术也得到了迅猛提升。三维重建技术作为计算机视觉和图形学的重要分支一直都是该领域的研究热点,该技术在人体医学、建筑工程、智能导航和虚拟现实等领域有着广泛的应用,而对透明物体的立体重建是三维重建中为数不多的开放性问题之一。本文提出了一种将光的折射原理与双目视觉系统相结合的方法,同时运用BP神经网络
由于微带栅格阵列天线具有结构紧凑,增益高,馈电简单等优点,因此在微波和毫米波领域广泛应用,特别是汽车防撞雷达。本文基于汽车防撞雷达的应用背景,围绕宽带和圆极化两个方向,对K波段微带栅格阵列天线展开研究。主要研究内容如下:1、设计一款经典的微带栅格阵列天线,引入枝节来改善匹配,移除阵列边缘长边以降低副瓣电平。然后将该栅格阵列与切比雪夫阵列进行较为全面的比较和分析。结果表明,与切比雪夫阵列相比,微带栅
生活垃圾是放错了地方的资源,有效的垃圾分类策略不仅可以起到保护环境的作用,而且还能实现垃圾的回收再利用,具有很高的经济效益。我国的垃圾处理厂对垃圾的分类处理目前还处于手工分拣阶段,这不仅造成工人的劳动量大、分拣效率低等问题,而且还会出现垃圾错分等现象。近年来,随着深度学习技术的不断发展,有效地提升了目标检测与识别的精度,并且深度学习具有自主学习的能力。因此,本文提出了一种基于改进YOLOv3(Yo
天线作为无线通信系统的窗口,承担着发射和接收电磁波的重任,对其性能的要求也随着系统多功能、集成化和小型化的发展趋势而日益严格。近年来,由于战场环境的复杂和信息科技的飞速发展,对飞行器搭载天线的研究也面临诸多挑战。一方面,为实现扩频通信对抗电子干扰,传统的多副窄带天线方案已不再适用,迫切需要研究具有载体共形、超宽工作频带、小型化特性的天线;另一方面,在相同的发射系统下要获得更大的目标探测范围需要天线
心率作为人体最重要的生命体征,随着生活质量的提高越来越受到人们的关注。目前广泛使用的心率检测设备在使用上具有局限性,无法满足持续检测。基于人脸视频的非接触式心率检测相比之下更具优势,应用前景更为广阔。大多数研究局限于某种特定场景的心率检测,如静止状态、头部轻微运动和光线变化等。由于日常生活中场景较为复杂,存在人脸旋转、面部表情等情况,对提取的r PPG信号产生干扰,因此需要进行深入研究。深度学习的
为了研究化合物溶剂在磁化改性中的作用机理,本文首先建立了一个磁场发生器,选取相应的铁芯形状,分别为C形与E形,绘制两个磁场发生器模型,选用优质碳素钢材料,借助电磁仿真软件并进行相应的电磁数值仿真,研究不同电流激励和间隙下的磁场分布特点,选用合适的参数使得产生的磁感应强度达到一定的范围,达到磁化所要求的0.6T~0.8T的磁感应强度,仿真研究表明,在相同的截面尺寸与面电流激励下,C形铁芯比E形铁芯具
随着科技的不断发展,有源相控阵在星载、舰载、机载等多个军事领域中承担着重要的作用,而其中射频接收组件作为有源相控阵的核心部分,宽频带和多波束逐渐成为接收组件的重要发展方向。本文采用微波多芯片组件(Microwave Multi-Chip Module,MMCM)技术,结合微波单片集成电路(Microwave Monolithic Integrated Circuit,MMIC)和微波多层板技术,完
经济社会的高速发展离不开信息的快速交互,而更高传输速率和更为可靠的通信系统也必将以更高工作频率和更高输出功率的电子设备为基础。功率放大器是一种能将直流能量转换为交流能量的器件,是通信设备的关键部分,也必须不断地提高其性能,才能适应经济社会的发展需求。而目前单个功放器件的输出能力仍无法满足这些要求,因此研究更低损耗、更宽工作频段的固态功率合成技术来实现宽带高功率的放大器将具有重要的意义。本文以设计K