基于Kinect的离散制造单元人机协作技术研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:yq_ma
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
促进制造业数字化、网络化、智能化是《中国制造2025》的重要方针之一,利用数字技术与人工智能技术提高制造效率为当前主流趋势。随着工业4.0的发展,制造业逐步向个性化、定制化生产转型,同时全球制造业正面临着人力成本上升的问题。在离散制造单元中使用人机协作技术,可以充分发挥人与机器人各自优势,从制造柔性、效率和安全方面得到提升,因此成为重点研究对象。实现人机协作关键在于让机器人理解人的行为活动。Kinect传感器对于复杂光照和背景变化下的人体关节识别具有较好的鲁棒性,适用于工业现场人机协作的感知,对提高人机协作的效率和安全性具有重要作用。本文针对离散制造单元设计了一种基于Kinect的人机协作系统,采集人体关节位姿并进行动作识别,从而实现对机器人的协作控制以及安全策略。首先,针对典型的离散制造场景构建了离散制造单元人机协作平台,利用Azure Kinect传感器实现工业现场人体关节数据和深度图像数据的采集与存储,并针对人机协作制造中的常见的人体动作构建了协作场景下的人体动作数据库。其次,对人体关节位置信息进行标准化处理,以降低不同位置、视角以及人体体态导致的数据异常。基于传感器提供的人体关节四元数姿态信息,提取关节角参量以及骨骼向量角速度,完成动作的特征数字化描述。针对传感器采集的人体关节噪声等异常数据,使用卡尔曼滤波进行去噪。在此基础上,将处理后的特征数据编码至高维空间,为模型训练预测奠定基础。接着,研究了基于图卷积神经网络的动作识别方法。分析了针对图结构数据的图卷积神经网络原理,并基于Azure Kinect传感器提供的数据构建了人体关节图,按照不同策略划分关节邻接矩阵,进而应用图卷积神经网络对协作场景动作进行识别,实现人体关节之间关联信息的高效提取和动作的准确分类。最后,在实际制造场景中验证了本文方法的有效性。使用滑动窗口法实现了高准确率的实时动作识别,并对视觉传感器采集到的深度图像进行分离轴碰撞监测,用于判断人机距离是否在安全范围内。完成了人机协作系统集成,将图卷积神经网络模型的识别结果和人体关节位姿按照规则发送给机器人执行,并进行了实验验证和应用效果分析。
其他文献
在石油工程领域,测井是地质勘探行业重要的测量方式。地球物理测井数据是获取油气藏资源描述信息的最主要信息源之一。特别是面对中晚期老油田的二次、三次开发,大范围高精度测井曲线的作用更为突出。地质学家可以根据测井数据建立精确的地质模型,进一步设计开发策略。然而,利用测井数据进行储层地质描述的应用中,经常出现部分测井曲线失真或缺失的问题,测井曲线复原一直以来都是相关研究领域的研究热点和难点。为此,本文以信
学位
随着近年来人工智能技术的兴起和发展,智能协作型机械臂的需求在日益增大,未来在医护、服务、娱乐、教育等领域,越来越需要轻型的、更具有柔顺性安全等级高的、协作交互性更强的智能机械臂来和人一起完成更复杂的任务。本文针对传统工业机械臂的负载自重比低、灵活性差、操作安全度低等限制,设计了一种六自由度差分式绳驱协作型机械臂。本文首先对现有的绳驱机械臂的驱动方式进行了分析和总结,提出了一种新型的二自由度差分式绳
学位
在机械臂系统的应用中,抓取物体是最为广泛的任务之一。传统的视觉引导抓取操作,针对的对象大多数是摆放在平面上有一定约束的物体。而现实中常见的场景是物体是散乱堆放的,彼此之间有重叠且置放于容器内。这类任务要求系统能够对物体进行分割识别并检测三维位姿,考虑抓取姿态避免碰撞,引导机械臂在受限空间中进行抓取。本课题使用低成本视觉系统,针对箱子中散乱堆放的规则刚性物体,通过Real Sense RGB-D相机
学位
随着对天然气能源需求的不断增加,天然气管道运输业得到了迅速发展,受管网老化及人为破坏等因素的影响,管道泄漏事故频繁发生,严重威胁了人们的生命财产安全。我国大部分城市地下天然气管道早期泄漏量小,往往难以发现和修复,因此,准确及时的对管道进行泄漏检测可以有效避免安全事故的发生。本文主要利用预处理、特征提取及工况识别三个关键技术实现对管道泄漏信号的检测。主要研究内容如下:首先,对自适应模态分解方法EMD
学位
目的 分析CT在先天性心血管疾病诊断中的应用效果。方法 选取2020年10月至2021年10月本院的100例先天性心血管疾病患者开展研究,100例患者均进行超声心电图检查(对照组)和CT检查(观察组),比较两组的诊断效果。结果 观察组的不同部位畸形检出率均明显高于对照组(P <0.05);观察组的疾病检出率明显高于对照组(P <0.05);观察组的诊断符合率高于对照组,漏诊率低于对照组(P <0.
期刊
近年来随着制造业的高速发展,各大企业都在逐步向智能化转型,作为企业生产主体的生产线,也是生产制造智能化的主体。因此生产过程中的生产线上各机器的协调成为了制造过程智能化中不可或缺的重要组成部分。然而在过去生产线协调的理论研究中,人们往往更关注于柔性生产线,尽管柔性生产线具有效率高、对动态事件适应能力强等优点,但是对于企业的技术、资金投入都比较高,纯柔性的生产线实现的前期成本往往比较高,对于大量的企业
学位
电火花加工依靠电极之间脉冲火花放电产生的热量来熔化甚至汽化材料,将其从工件上去除可用于加工高强度、高硬度和导电材料。气中电火花加工具有环境友好、电极损耗低且加工设备利于集成具有较大的发展潜力。气中电火花加工产生的电蚀产物的排出仅仅依赖于间隙气流的吹动,间隙气流状态的分布规律决定了电蚀产物的运动状态和分布特点。此外,电火花加工放电蚀除过程非常复杂且具有随机性,目前对放电机理并不十分清楚。因此对气中间
学位
混沌是自然界广泛存在的一种现象,具有初始条件的极度敏感性,类随机运动和高度不可预见性等特点。自从发现混沌系统可以被控制以来,对于混沌理论的研究与应用,受到了广泛关注。目前,混沌同步控制的理论研究以及在保密通信方面的应用也得到不断地发展。混沌同步的研究对于保密通信有着重要的意义,考虑到组合同步多变量、组合方式多样的特性,对保密通信方向的应用有天然优势,但目前对多个混沌系统之间的组合同步控制研究还较少
学位
习近平总书记强调,要把红色资源利用好,把红色传统发扬好,把红色基因传承好。思政课要落实立德树人根本任务,就要注重将红色文化资源与思政课教学有机融合,发挥出红色文化资源溯本清源、固本强基、铸魂育人的育人功能。在高职院校思政课教学中融入辽宁省红色文化资源,应注重从理论教学和实践教学两个方面探索融合路径,结合高职院校学生特点寻求方式方法,不断提升思政课育人效果,引导新时代大学生坚定理想信念、肩负社会责任
期刊
目前针对高速铁路应急救援处置流程监管,主要依靠应急管理人员指挥及自身经验完成,对应急救援进度预警研究还存在不足。根据高速铁路行车事故应急救援过程,利用随机网络GERTS模型并确定节点参数,将预测结果作为合理的救援计划时间,对比关键工序实际救援时间与计划时间,判断进度延误趋势,以进度偏差为指标进行预警,完成高速铁路交通事故应急救援进度预警模型的构建,并以某次高速铁路事故应急救援过程为例,说明模型的具
期刊