不再局限于视觉!MIT 研发新技术让机器人通过触摸即可与周围环境进行交互

来源 :海外星云 | 被引量 : 0次 | 上传用户:sueprding
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读

  人类能够通过触摸找到周围的物体并明确其某些属性,这一技能对盲人来说尤其重要,而没有视觉障碍的人同样在日常生活中频繁用到这一点,例如在口袋中摸索并抓住一样东西。
  近日,麻省理工学院(MIT)的研究人员进行了一项技术研究,旨在将这种人类能力复制到机器人上,从而使其通过触摸即可了解对象的位置并可实时估计对象的姿态。该研究成果预先发表在 arXiv 上,论文着重强调了不再局限于视觉、音频处理而只需通过触摸就能与其周围的环境进行交互的机器人的优势。

帮助机器人通过触觉感知来定位物体

技术原理(英文图示)

  “我们的研究目标是想证明,机器人通过高分辨率的触觉感应,甚至首次接触就可以准确定位已知的对象。与以前在触觉定位方面的工作相比,我们的方法有了重要的飞跃,因为我们不依赖于任何其他外部感应方式(例如视觉)或以前收集的与被操纵对象有关的触觉数据。恰恰相反,我们的技术是在模拟中直接训练的,它第一次触摸就可以定位已知对象,这在实际的机器人应用中至关重要,因为在真实的机器人中,实时数据收集成本很高或根本不可行。”进行该项研究的研究人员之一 Maria Bauza 表示。
  由于这项技术是在模拟中得到过训练,因此 Bauza 及其同事不再需要大量的数据收集。这些研究人员最初开发了一个框架,该框架可模拟给定对象与触觉传感器之间的接触,因此假设机器人有权访问与其交互的对象有关的数据(例如其 3-D 形状、特性等)。这些接触会被描绘为深度图像,可显示出对象穿透触觉传感器的程度。

  随后,他们使用先进的机器学习技术进行计算机视觉和表征学习,将机器人收集的真实触觉观察结果与模拟生成的一组接触信息进行匹配。根据模拟数据集中的每次接触与实际或观察到的接触的匹配可能性,对其进行加权,最终框架会获得对象的可能姿势的概率分布。

研究人员使用的触觉传感器


  Bauza 说道:“我们的方法将被描绘为深度图像的接触编码到一个嵌入式空间中,这极大地简化了计算成本,可以做到实时执行。由于它可以产生有意义的姿势分布,因此可以轻松地与其他感知系统结合使用。例如,在多触点场景中,多个触觉传感器同时触摸一个对象,我们必须将所有的观察结果都整合到对象的姿态估计中。”
  本质上,这种方法可以根据对象的 3D 形状模拟出接触信息。但他们发现,在利用这种技术仔细触摸对象时并不需要收集任何以前的触觉数据。也就是说,有了这项技术,机器人的触觉传感器可以在首次触摸到对象时就生成可能的姿势判断。
  Bauza 表示,他们意识到触觉感知具有高度鉴别性,并能产生高度精确的姿势估计。“视力有时会受到遮挡的影响,但触觉感应却不会。因此,如果机器人触碰到了某个独特对象的一部分,且这种接触与其他的不同,那么我们的算法可以轻松识别出这一接触及对象的姿态。”
  由于许多接触对象不具备的独特区域(即它们的放置方式可能导致最终的接触极其类似),因此 Bauza 及其同事开发的方法可以预测的是姿势分布,而不是单个姿势估计。这与此前开发的只收集单个姿势估计的对象姿态估计方法形成了鲜明的对比。而且,该框架预测的分布信息可以直接与外部信息进行合并,从而能够进一步减少对象姿态预测的不确定性。
  值得注意的是,他们还观察到,同时使用多个手指接触对象,并同时对多个接触进行组合,也可以迅速减少对象姿态估计的不确定性。
  參与这项研究的另一位研究员 Alberto Rodriguez 表示,“感应触摸能力最近在业界引起了极大了研究兴趣,而我们主要是通过结合三个因素来实现这一点的:(1)一种分辨率高但并不昂贵的感应技术,该技术使用小型相机来捕获触摸表面的变形(例如 GelSight 感应);(2)将此传感技术紧密结合到机器人手指(例如 GelSlim 手指)中;(3)基于深度学习的计算框架,来有效处理高分辨率触觉图像,从而通过已知零件完成触觉定位。”
  总之,该研究小组设计的这项技术可以让机器人实时、高水平地估计其正在操作的对象的姿态,这样一来,就让机器人能够对其具体动作的影响做出更准确的预测,从而可以提高其在操作任务时的表现。这对工业当中根据物品形状的模型进行组装的制造商来说极具价值。
  在未来的工作中,Bauza 团队计划扩展这一框架,使其能够涵盖有关对象的视觉信息。理想情况下,他们还希望将其技术转变为一种视觉 - 触觉传感系统,从而能够以更高的精度来估算对象的姿态。
  “我们正在进行的另一项研究与这种方法密切相关,目的是探索触觉感知方法在复杂操作任务中的运用。现在我们正在学习能让机器人执行精确地抓放操作的模型,以实现稳定地抓握,帮助提高感知水平,改善触觉定位。” Bauza 表示。 (摘自美《深科技》)(编辑/诺伊克)
其他文献
近日,中国JF-22超高速风洞的最新进展得以公开。  据了解,风洞是一种可用于研究高超音速飞行器的实验设备,通过人为操控气流来模拟飞行器周围气体的流动,还能够度量气体对物体的作用并观察物理现象。天地往返飞行器  当飞行器以超高速飞行时,随着速度的不断加快,其温度会快速升高,直至达到2000摄氏度后,周围气流中的氧分子和氮分子就会变成原子甚至变成离子状态,从而出现一些很复杂的情况,导致飞行器处于“泥
非洲猪瘟病毒的传播方式多,传染性强,一旦被感染,死亡率最高可达100%亚洲出现新疫情  9月9日,菲律宾首都马尼拉周边村庄突发非洲猪瘟疫情,至少有七个村庄的猪群出现死亡。当地官员表示,将成立一个多部门机构,以确保这种高传染疾病不会进一步蔓延。据悉,菲律宾是亚洲最新出现非洲猪瘟疫情的国家。早前,中国、日本、越南、蒙古、柬埔寨、老挝和朝鲜等国都先后出现过该疫情。  菲律宾农业部长威廉·达尔在9月9日举
卡内基梅隆大学计算机科学系教授凯瑟琳·卡莉(来源:卡内基梅隆大学)  社交平台是热点信息和重大新闻的关键获取渠道之一,尤其是在当下新冠肺炎疫情大流行时期。  一个公认的事实是,出于各式各样的目的,无论是国内的微博,还是国外的推特,平台上经常会有机器人账号,也就是所谓的 “僵尸” 账号出没。不过,这些伪装成真人的虚假账号通常不会占据太大比例。  以推特为例,卡内基梅隆大学计算机科学系教授凯瑟琳 ·
谢霆锋是受邀到中国香港谷歌演讲的第一人,52分钟全程英语,难不倒八岁移居加拿大的他,主题“热情与革新”,从容幽默地分享观点与人生,演讲水平不逊于知名企业家。  谢霆锋认为网络虽开启世界大门,但大家都该抬起头走出去亲身体验。大众在网上接收太多资讯,不断吸收他人的想法,不自觉地失去自己,这是危险的。当你和所有人一样,那你将不被世界需要。  谢霆锋回首人生:12岁住寄宿学校,14岁到东京受训,16岁进演
塞巴斯蒂安·布拉斯成为了业界翘楚:这位主厨开在法国南部的Le Suquet被评为米其林三星餐厅,这是一项令人羡慕不已的殊荣。  但布拉斯却在2017年因为要求米其林撤销Le Suquet的三星评级而登上媒体头条,他的理由是:当他知道,任何不够完美的菜肴都会对餐厅的声誉构成威胁时,他感受到了“巨大的压力”。  “你每年都要接受两三次检查,而且不知道在什么时候。每一道端出去的菜都有可能被检查。这就意味
美国好莱坞明星乔治·克鲁尼亲口证实多年传闻,他送给14位曾经帮助过他的朋友每人100万美元现金作为礼物。  克鲁尼向《GQ》杂志亲口叙述起这段往事,听起来好像是好莱坞电影里面的情节,但却是发生在现实生活中的事,而且就发生在好莱坞。  最早是在2017年,克鲁尼的好朋友和生意伙伴格伯最先透露他收到了克鲁尼送给他的一个装满现金的箱子,以表示对他的谢意。克魯尼首次证实传闻克鲁尼和人权律师艾玛2014年结
电子商务已经有几十年历史,但是最近才成为主流  最近几个月,你上网买了几次东西?随着疫情持续,我们依赖电商将所需要的东西送货上门,日常食品、书籍、美容产品、儿童充气泳池,迅速快捷而且不用与人接触。  这些货品有的是日常必需品,有些不是。今年4月在加拿大,被隔离在家的人们网上购物,买了很多鹌鹑蛋罐头,斯塔琴弦和儿童的蹦蹦床。网购的前世今生  从恐慌性扫货我们已经知道疫情带来的心理压力能影响我们的正常
近日,华人学者开发出一种“真正可穿戴”的可穿戴电子设备,这是一种受人体皮肤启发的、可粘在皮肤上的“电子皮肤”,其内部主要由电路板构成。  负责该研究的科罗拉多大学博尔德分校的机械工程系副教授肖建亮和艺术与科学学院教授张伟,其表示相关成果以《“电子皮肤”有望成为可穿戴设备的廉价且可回收的替代品》为题,已公开发表。可在手腕上佩戴的电子皮肤  该“电子皮肤”具有卓越的延展性、自愈合性、可回收性和可重构性
对于品牌来说,创意广告的输出、品牌画册的策划以及视觉大片的呈现,都算得上是“品牌履历”上强而有力的背书,不但能够塑造品牌的风格形象,也能传达出品牌每一季乃至每一次合作企划所想要讲述的故事和主题。  而在过去,我们也见证了不少让人拍案叫绝的创意企划,比如由伦敦创意公司 werkflow 为 Nike 与 A-COLD-WALL* 联名企划所打造的视觉,由导演暨喜剧演员 Jonah Hill 演绎的
草地贪夜蛾  前有非洲蝗虫袭来,能吃又能生的沙漠蝗已经一路肆虐从东非蔓延到了印度和巴基斯坦,隔着喜马拉雅山对云南虎视眈眈。  中国农业大学昆虫学系主任石旺鹏曾表示,比起草地贪夜蛾,沙漠蝗的食性更广,移动性更强,繁殖量更大,适应性更强,危害更大。而如果两种虫害叠加爆发,将会是种植业的灾难。草地贪夜蛾的危害  没过几天,农业农村部种植业管理司司长潘文博在春季生产发布会上称,据监测,今年草地贪夜蛾虫源基