面向机器人抓取任务的视-触觉感知融合系统研究

来源 :中国科学院大学(中国科学院人工智能学院) | 被引量 : 2次 | 上传用户:qqqq920644875
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
当前机器人为实现精细操作都搭载各种各样的感知系统与外界环境进行交互。若各感知系统之间相互独立,将会忽略各模态感知系统之间的信息关联性,导致信息利用不彻底,造成信息的浪费。完成同一任务,将会更加的复杂,最终降低了机器人的智能性。本文以ZED相机和薄膜压力传感器为中心分别搭建视觉感知系统和触觉感知系统两个子系统,采用视-触觉融合的理论,研究机器人抓取任务中的柔性体抓取问题和抓取状态的滑觉检测问题。在柔性体抓取方面,视觉感知系统和触觉感知系统之间采用串行操作。首先视觉感知系统将使用MATLAB标定工具箱进行双目相机的标定和机械臂标定。标定完成后,不采用传统的SIFT算法和早期的深度学习算法,而是使用检测效率更高的YOLOv3算法对ZED相机内置的目标检测模块进行开发,并结合ZED相机的深度信息处理模块进行目标的三维坐标解算,完成ZED相机的二次开发。得到物体的坐标后,触觉感知系统将调用预采集的触觉信息库,输出合适的握力,控制机械爪进行抓握。在滑觉检测方面,视觉感知系统和触觉感知系统之间采用并行操作。抓取过程与基于视-触觉的柔性体抓取过程一致。在滑觉检测部分,不单独依靠某一系统进行判断,而是综合视觉感知系统和触觉感知系统两个系统的判定结果进行联合判定。通过对比实验发现,自设计的视-触觉感知融合系统,在柔性体抓取方面,不仅造成的损伤率比单模态下的视觉感知系统低,而且比传统的基于SIFT算法的视-触觉感知系统目标检测的效率更高。在机器人抓取状态的滑觉检测方面,自设计的视触觉感知融合系统比起单模态的视觉或触觉感知系统,以及传统的基于SIFT算法的视触觉感知系统具有更高的准确率。
其他文献
正常情况下,子宫内膜应长在子宫腔内。如生长在子宫以外的身体其他部位,并引起相应的病变及症状,即称为子宫内膜异住症.此病为较常见的一种妇科疾病.近几年发病率有明显上升。我院
关键词 腰椎间盘突出症 综合治疗    腰椎间盘突出症是骨伤科常见病,多发病。笔者自2006年10月~2009年10月,采用综合疗法治疗200例,取得良好疗效,现报道如下。    1 临床资料    本组共200例,男118例,女82例;年龄21~70岁;病程2天~12年;L3-4突出11例,L4-5突出82例,L5~S1突出66例,L4-5、L5~S1。同时突出31例。全部病例均进行CT或MRI
<正> 1998年我应聘到外文出版局下属的中国画报社泰文编辑部任泰语专家,聘期一年,那是我第一次来中国。在此之前,我是泰国总商会大学人文学院泰语系的教师。到中国来是我人生
目的探讨宫颈癌放疗患者生活质量与配偶家庭功能的相关性,为提升患者生活质量提供依据。方法采用方便抽样抽取四川省肿瘤医院放疗科95组宫颈癌放疗患者及其配偶。采用生活质
【中图分类号】R47【文献标识码】B【文章编号】1008-1879(2012)11-0231-02  急性肾盂肾炎是妊娠期最常见的泌尿系统合并症,起病急骤,突然出现寒战、高热可达40℃以上,也可低热,伴头痛、周身酸痛、恶心、呕吐等全身症状和腰痛及尿频、尿急、尿痛、排尿未尽感等膀胱刺激征。排尿时常有下腹疼痛,肋腰点有压痛,肾区叩击痛阳性。如不及时治疗可造成早产、败血症、甚至诱发急性肾功能衰竭等。其治
<正>~~
期刊
1995年我们首创用体外反搏技术治疗小儿脑瘫,至今已治疗小儿脑瘫患者2000多例,取得了较好的疗效,也将该技术推广至全国.同时,我们也积累了较丰富的操作经验.现就操作中遇到的
2005年11月17日,艾默生网络能源有限公司工控产品技术交流会在徐州苏源酒店成功召开。此次技术交流会吸引了徐州地区众多的客户和工控公司参加。艾默生在工控市场取得不俗的成
过去的18个月,许多的在线教育公司如雨后春笋般冒了出来。$$在线教育作业盒子日前公布的数据显示,作业盒子累计注册用户超过2000万,覆盖了全国400多座城市的5万所学校,累计采集答
报纸