【摘 要】
:
随着计算机与人工智能技术的快速发展,机器人已经被广泛的应用于装配、分拣等工作场景,逐渐改变了以人为主的机械式流水线工作模式。而传统的机器人控制方法常常是依赖于应用领域和数学模型的,它们无法满足智能制造和定制生产等许多领域的通用性和灵活性的新兴要求。因此,本文针对多步骤的物体分拣任务,分别在监督学习和强化学习框架下提出了基于Transformer和基于深度强化学习的机器人分拣方法。为满足机器人分拣任
【基金项目】
:
国家自然科学基金(编号:61806175)
论文部分内容阅读
随着计算机与人工智能技术的快速发展,机器人已经被广泛的应用于装配、分拣等工作场景,逐渐改变了以人为主的机械式流水线工作模式。而传统的机器人控制方法常常是依赖于应用领域和数学模型的,它们无法满足智能制造和定制生产等许多领域的通用性和灵活性的新兴要求。因此,本文针对多步骤的物体分拣任务,分别在监督学习和强化学习框架下提出了基于Transformer和基于深度强化学习的机器人分拣方法。为满足机器人分拣任务需求,搭建了机器人分拣系统与实验平台,完成了对机械臂运动学的分析及控制,建立了相机模型和手眼标定模型并进行手眼标定。同时,考虑到机器人分拣方法在使用过程中需要知道机器人工作场景中物体的属性,使用基于Faster R-CNN的物体检测算法对工作场景中的物体进行检测。针对机器人分拣任务中复杂多变的工作环境,首先在监督学习框架下提出基于Transformer的机器人分拣方法,在Transformer网络的基础上设计了两个编码器(视觉和语言编码器)和一个解码器(动作解码器),把机器人工作空间中物体的符号和表示分拣需求的自然语言指令分别作为两个编码器的输入,使解码器输出机器人原始动作序列,并让机器人执行该序列中的动作从而完成相应的分拣任务。然后,在强化学习框架下提出一种利用深度Q学习算法并结合经验优先采样方法,将机器人工作场景的图像作为输入,输出为机器人动作指令的一种端到端的机器人控制方法,使机器人能够根据工作场景的图像直接完成分拣任务,而不需要任何像素级别的语义解析。该方法包含对机器人工作空间的状态描述、原始动作集的设定、Q函数的学习和奖励函数形状的设计。根据所提出的两种机器人分拣方法,分别进行了实验研究。首先采集训练样本训练基于Transformer的机器人分拣方法,并设计两个测试集验证方法的性能。接着为了检验基于深度强化学习的机器人分拣方法的可行性与有效性,设计三种类型的训练场景和多组测试场景,并将仿真环境下训练出来的模型直接迁移到真实场景中进行测试。通过实验结果表明,本文所提出的两种机器人分拣方法可以高效地完成分拣任务,并具有一定的泛化能力。
其他文献
县级文化馆加强群众文化建设是促进乡村文化振兴、落实乡村振兴战略的重要抓手。当前,县级文化馆群众文化建设在文化资源和基础设施、群众基础、活动品牌、馆内凝聚力等方面具有优势,在资金投入、人才、内部管理和激励机制等方面存在劣势;国家重视程度的提升、乡村群众日益增长的精神文化生活需求、信息技术的快速发展、全面深化改革的稳步推进为其带来机遇,而经济新常态、相对落后的乡村文化基础设施和偏低的群众文化水平、城镇
文化产业发展背景下我国的艺术与旅游产品结合,可以促进文化产业的发展,也可以促进传统文化产业与旅游产业的有效融合与改革。在当前社会发展背景下,文化产业的转型升级要求将艺术与旅游产品结合,从而更好地整合我国文化市场资源,促进文化旅游产业的稳定发展和结构转型。旅游业的转型改革,可以将艺术与旅游产品结合,这样不仅可以促进艺术的发展,还可以促进旅游产品的创新发展。文章从文化产业发展的角度剖析艺术与旅游产品结
推动农村地区公共文化服务创新与发展是乡村振兴的必然要求,西方发达国家的实践可为我国提供借鉴和启示。以美国农村地区公共文化服务供给为例进行分析可以发现,美国公共文化服务供给体系与模式包含以下五个方面:公共文化服务供给的整体性体系、土著部落的公共文化服务供给体系、以公共图书馆为载体的公共文化服务供给模式、非营利组织参与公共文化服务供给的实践模式、社区参与公共文化服务供给的实践模式;美国农村地区公共文化
网络交易具有隐秘、分散、虚拟的特征,网络主播基于牟利、侥幸等心理,利用隐匿收入、转变收入形式等手段减少纳税税额,不易被税务部门及时发现,导致巨额税款流失。本文在总结网络主播逃税现状的基础上,探讨了背后的原因。并且税务部门对个人所得税适用上的法律争议,也阻碍对网络主播逃税问题的追究。最后,本文认为,改善网络主播征税现状,要从国家与个人两个层面着手。既要完善税收法律制度,提高税务部门信息化监管水平,也
<正>"网红"喜茶能否加持"喜小茶"?子品牌喜小茶是否会冲击喜茶的品牌势能?"报复性涨价"、推出子品牌"喜小茶"、申请新商标"喜小咖"……喜茶在近期的话题度颇高。日前,喜茶上调了5款饮品的价格,分别是豆豆波波茶、多肉芒芒甘露、芋泥波波鲜奶、流心奶黄波波冰、奶茶波波冰,上调范围在1~2元。喜茶回应多款产品涨价2元是因为原料成本上升。
我国迅速发展的社会经济导致自然资源环境遭到了大量的破坏,不但影响到了我国不可再生能源的应用,而且也对我国水资源环境造成了严重的威胁,在一定程度上对我国原本匮乏的饮用水资源造成了巨大的危害,严重影响到人民群众的生活水平和生活品质。本文以水中总氮检测工作的重要性为切入点,针对水质分析中总氮测定的常见问题进行了相应的分析,论述了碱性过硫酸钾消解紫外分光光度法检测工业废水总氮的原理,并且对碱性过硫酸钾消解
随着现代社会经济不断地在发展,各行各业都在逐渐地扩大,平面设计的应用也变得非常的广泛。平面设计应用不仅对广告行业还有媒体网络产生了重要的影响,而且现代大部分企业用来表现自己公司的特色和产品理念,在很大程度上影响着企业的发展。所以现如今政府相关人员正在向企业干部大力强调要注重对平面设计的发展,根据社会的实际情况去制定合适的方案方针,设计人员还要在平面设计中不断地进行突破和创新。这样才能保证企业和社会
<正>1.引言进入21世纪,游戏已经慢慢渗透进人们的生活,并且成为全球新一代年轻群体的重要娱乐休闲方式。在此趋势的推动之下,游戏渐渐成为一股不容小觑的力量与产业,正逐渐影响着国家经济、文化的发展乃至政策法规的制定。经过30年的发展,中国游戏行业积累了大量的经验、人才和技术,但与发达国家相比仍存在许多不成熟之处,飞速发展的游戏产业存在着一些不容忽视的问题。
近年来,随着社会经济的发展,我国的建筑行业在近几年也取得了很大的成就,但随之而来的是各建筑企业之间的竞争日益激烈。建筑工程作为城市建设的重要内容,其质量安全成为当下建筑企业以及广大人民关注的重点。建筑工程出现质量问题会严重阻碍建筑企业的发展和威胁人民的生命财产安全。因此,加强建筑工程质量监督势在必行。建筑企业只有不断加强建筑工程质量监督,才能有效提高施工现场的安全系数以及建筑工程整体质量,保障人民
从文化生态视角探索乡村文旅产品创新设计路径,即将乡村文化与其所共存的经济、生态等环境要素有机整合,系统性地进行相关文创开发。在乡村振兴和农文旅融合的大背景下,乡村文旅产品作为乡村旅游产业中不可或缺的一环,是传承优秀乡村文化的重要载体,开展文旅产品设计能够促进乡村经济发展。以山东青岛为例,基于文化生态理论探讨青岛乡村旅游产品的文化生态属性,分析青岛文旅产品发展现状,进行与之对应的产品创新设计探索:挖