多点标识下的挖掘机工作装置姿态测量

来源 :太原理工大学 | 被引量 : 0次 | 上传用户:carinalove
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
挖掘机广泛应用于各种施工场合,在工程机械中占有十分重要的地位。挖掘机作业环境复杂多变,常伴有噪音、粉尘,一些场合甚至存在塌方、辐射等危险,挖掘机自主智能化作业已成为未来发展趋势。工作装置姿态信息是智能控制系统的重要参数,实时精准地获取姿态信息对自主智能化作业起着至关重要的作用。在挖掘机工作装置姿态测量方面,大部分是以电位计、关节角度编码器等接触式传感器来实现。近年来一些研究人员针对姿态测量中接触式传感器容易碰撞损坏等问题,提出了基于视觉测量技术的姿态测量方法。在工作装置上张贴具有角点特征或其他几何形状特征的人工靶标,相机捕获图像并进行图像处理,提取人工靶标的特征信息后计算获得工作装置姿态,完成姿态测量。该方法一定程度上仍存在着一些问题,例如:人工靶标易被环境中灰尘、泥土等粘附污染,人工特征被遮挡,使工作装置姿态测量失败;其次,视觉平面测量中,图像上某些目标特征会随相机成像夹角的增大而形变增大,影响特征的检测和定位;此外,挖掘机与作业环境过度融合且机身具有棱角,检测靶标上角点时易检测到较多无效角点特征,筛选有效特征会增加图像检测时间,也可能出现由于漏检或误判有效特征导致测量失败的现象。本文针对以上视觉测量中存在的问题,提出基于视觉的多点标识挖掘机工作装置姿态测量系统,为一台无任何传感器的挖掘机模型配备工作装置姿态测量系统。在系统中引入深度神经网络,有效解决关键点标识的检测和定位问题。利用一台RGB摄像机和YOLOv3深度学习算法实现对无任何传感器挖掘机工作装置的姿态测量。为工作装置设计布置区别于背景环境、易于识别和定位的关键点标识,捕获大量工作装置图像并标注建立数据集,以此数据集训练获得视觉模型实现关键点标识的检测;根据关键点间的约束关系和相机成像原理还原关键点标识的三维信息,并计算相应工作装置杆件的姿态角。具体研究工作如下:(1)进行挖掘机工作装置姿态测量系统的搭建。设计挖掘机工作装置姿态测量方案,包括硬件结构的组成和布置;设计并布置8种类型的关键点标识,并为每个标识配备冗余标识,保证检测不遗漏;设计布置图像数据采集系统,采集图像并制作样本容量为1300的VOC训练集;基于张正友棋盘格标定法,制定摄像机参数的校核标定方案;布置接触式传感器陀螺仪,获得工作装置的实际姿态角,用作评判模型性能好坏的依据。(2)搭建二维关键标识检测模块的训练平台和环境,根据前期采集并制作的VOC数据集,利用基于深度神经网络的YOLOv3目标检测算法训练获得关键点标识检测模块。(3)针对人工靶标污染损坏的现象,设计两组不同状态标识的试验,对每组试验均进行静态测量和动态测量,记录分析对应状态下工作装置姿态角的测量结果。针对相机成像时图像上标识变形导致工作装置姿态角测量有误的现象,进行试验。研究表明:本文多点标识下的挖掘机工作装置姿态测量系统可以有效地改善基于视觉工作装置姿态测量中存在的一些问题;一般情况下,测量系统对工作装置的测量偏差在±2°范围内,对每帧图像平均处理时间约为108ms,满足工作装置实时测量的要求。
其他文献
为了从高维的数据中挖掘其内在的价值,并提高数据分析的时间效率,需要提取高维数据的低秩特征。主成分分析算法能够提取数据的低秩特征,提高机器学习算法的计算效率以及机器学习算法的泛化能力。经典的主成分分析算法存在不能提取含噪声数据的低秩特征的缺点,通过对鲁棒主成分分析算法的研究,能够解决传统的主成分分析算法不能提取含噪声数据的低秩特征的这一问题。现有的鲁棒主成分分析算法具有时间效率低下的问题,本文基于此
肌萎缩侧索硬化(Amyotrophic Lateral Sclerosis,ALS)等疾病会让患者逐渐失去自主控制肌肉运动的能力,最终导致功能和认知障碍。脑机接口(Brain-Computer Interface,BCI)技术能够在大脑与外围环境之间构建起一条人为的信息传输通道,是一种可以替代传统神经肌肉通路的新型交互方式。发展脑机接口技术最主要的目的就是帮助患有运动功能障碍的人群重新获得与外界互
随着光纤通信技术的不断发展,具有峰值功率高,脉冲宽度窄的超短脉冲成为了科学研究的热点。超短脉冲在光纤传感、光纤通信、光信息存储和非线性光学等领域具有重要的应用价值。光脉冲在光纤中的传输可以用非线性薛定谔方程来描述。理论研究证明,利用非线性薛定谔方程可以得到有限背景上的孤子解。通常有限背景上的孤子解可以分为Peregrine孤子解、Kuznetsov-Ma孤子解、Akhmediev呼吸子解,其中,A
在图像处理的研究过程中,所拍摄的图像是否清晰对于分析图像的特性至关重要,在影响图像清晰度的各种因素中,恶劣天气对于图像的拍摄有严重影响,其中雨天是不可避免的因素之一。因此,对雨天所拍摄图像上的雨滴以及雨条纹的去除,是确保图像清晰度的必不可少的研究过程。目前,去除附着图像上雨滴的方法主要包括传统方法,基于非生成对抗网络以及基于生成对抗网络的方法。其中传统方法耗时费力,效果显著性不强,非生成对抗网络方
随着信息化与工业化的发展,物联网作为其中关键一环,得到了广泛的应用。射频识别(Radio Frequency Identification,RFID)技术是物联网的主要技术之一,已被广泛应用在各种场景中。主要被用来实现对物品信息的收集、自动识别、身份认证等。在一些RFID应用场景中,往往需要布设多个阅读器,以期覆盖整个监管区域。在多阅读器并存的环境中,如何防止阅读器之间的通信冲突或通信碰撞十分值得
闪存技术经历了几十年的发展,闪存单元的尺寸经历了明显地缩放,对于存储性能的要求越来越高,相应的器件模型的建立也面临着重要的挑战。POM分子闪存器件作为一种新型的闪存器件,利用POM分子作为闪存单元的浮栅代替传统的硅浮栅极,使得闪存单元可以在纳米范围内进一步缩放,这对于闪存行业的发展具有重要意义。模型参数提取,器件模型的电路级建模和相应的电路仿真研究,是器件研究过程必不可少的部分。模型参数的提取方法
智能驾驶技术是目前高新科技领域的重点研究对象,它对社会发展、经济建设和科技进步等都有着重要的影响。传统智能驾驶环境感知领域是通过图像传感器、激光传感器和雷达等多传感器信息融合感知环境信息,该方法存在传感器数量多、计算复杂和成本高等缺点,而利用视觉图像来进行道路静态目标的检测识别具有无可比拟的优势,通过一次视觉图像的获取可同时获得路面的多种目标信息。基于聚焦形貌恢复技术的原理,本文提出一种利用车载单
综采支运装备是综采工作面支护与推进的核心设备,实现综采支运装备协同推进是综采工作面协同推进的关键环节之一,对实现综采工作面无人化、透明化开采具有重要意义。由于连接综采支运装备的浮动系统的运动具有自由性、空间性的特点,使得刮板输送机无法被推移至既定位置,进而对其协同推进过程中的刮板输送机的直线度产生影响,最终影响整个综采工作面的协同推进。由此,对综采支运装备的浮动连接机构的空间运动进行建模与分析成为
对于大面积的自生林和野生林,需要有效地检测具有代表性的可燃物区域,进行针对性的火警监测。当前森林可燃物普查的有效手段是通过飞行器拍摄获取森林影像数据集,但获取的数据集庞大,需要从中选出具有代表性的可燃物区域进行监测,同时也会带来数据处理复杂的问题。从数据集中选择小部分代表性数据的问题可以称其为数据摘要问题,而数据摘要问题常通过传统子模集合覆盖方法来解决。数据集庞大造成的计算复杂则可通过引入流式算法
本课题是山西省研究生联合培养基地人才培养项目(2018JD09)“无人值守工作面液压支架电液控制系统的研制”的重要组成部分,它是针对井下无人值守工作面在实验室和监控中心如何再现的问题而提出的。课题以煤矿井下综采工作面液压支架电液控制系统为研究对象,将虚拟仿真技术应用于液压支架监控平台,基于实验室现有的无人值守工作面模拟实验系统,以智能化综采工作面液压支架动态仿真平台为目标,开发出一套液压支架远程控