基于混合脑机接口与共享控制策略的脑控机械臂研究

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:ljh6090008
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
脑机接口由于能够实现人脑与外设的直接信息传递,被普遍认为是重塑瘫痪病人基本日常生活自理能力最具潜力的方法。而脑控机器人手臂系统作为辅助实现上肢运动功能最直接的技术之一,在脑机接口实际应用领域中扮演着重要角色。然而由于非侵入式脑机接口较差的信号质量以及解码表现,如何拓展脑机接口控制维度并提高任务性能一直是非侵入式脑控机械臂的研究重点。随着人机共融理念的发展,共享控制的提出为增强脑控系统的表现提供了一种有效的解决方案。但是目前已有的大部分共享策略都是通过手动设定仲裁准则实现的,该过程高度依赖开发者的设计经验以及具体任务需求,且针对不同场景其可移植性较差。对于控制维度,虽然有诸如动态分级接口等方案的提出,但存在操作逻辑复杂等缺点。基于上述分析,本文提出了一个新的共享控制模型,可以在实时控制中根据控制情境动态地自动优化控制指令。此外,还采用了基于主、副分级结构的混合脑机接口范式,拓展控制维度的同时更好地优化资源分配。本文所搭建的机器人手臂系统允许非侵入式脑机接口用户操纵机械臂在三维空间中运动,并完成基于多物体的目标抓取与定点放置这一功能性任务。本文首先搭建了一个以稳态视觉诱发电位为主接口,运动想象为副接口的混合脑机接口子平台,按照具体指令的重要性等级对其进行接口映射,在扩展控制维度的同时优化资源配置。随后针对该接口设计了一个二级串联结构解码器:利用频域特征与线性判别分析实现一级范式解码;利用滤波器组典型相关分析实现稳态视觉诱发电位的二级解码以及利用共空间模式和线性判别分析实现运动想象的二级解码。然后搭建了基于自主感知的机器人手臂子平台。利用深度相机所捕捉的RGB场景图像,采用深度神经网络进行二维语义分割以实现目标检测。同时基于点云库对捕捉到的场景点云进行处理,分别通过欧拉聚类与迭代最近点算法实现基于单个物体点云的位姿估计,并在此基础上实现自动抓取与放置功能,为后续共享控制的开发打下了基础。随后,本文提出了基于意图推理与概率融合的共享控制模型。通过引入基于最大熵的目标预测模型,结合运行轨迹信息,实现基于具体任务情境的实时用户意图推理,为共享控制辅助提供有效的引导。并且,根据同时共享控制策略的需求,建立了基于贝叶斯信息融合理论的人机指令实时融合模型,使用户可以与机器代理一起协作完成目标物体的抓取。最后,本文基于所搭建的混合脑机接口与机器人手臂平台,围绕所提出的共享控制策略,进行了离线与在线实验,旨在验证本文所提出的脑控机械臂系统在实际生活中完成任务的可行性。其离线结果肯定了该混合脑机接口范式在解码与控制上的可行性;在线结果表明,大多数受试者可以利用该系统完成多目标物体的抓取-放置这一日常生活任务。且本文提出的共享控制策略可以极大地改善脑控机械臂系统的控制表现。本文通过引入混合脑机接口范式与共享控制策略,实现了脑控机器人手臂的三维运动,并完成基于多物体场景的目标抓取与定点放置这一常见的功能性任务。在未来,这种基于实时控制环境进行自适应融合的人机协作方式有望使脑机接口技术从单纯实验室研究拓展到日常应用中。
其他文献
在中国几千年的历史进程中,人们物质文化生活从未达到当下的丰裕程度。各种营销以食物和文化为载体刺激着人们的味蕾和大脑,诱导并满足人们的欲望,创造了很多的商业奇迹。同时导致饮食结构和生活习惯发生了巨大的变化,伴随而来的是我国慢性病发病率急速升高。相关数据显示截至2020年,我国慢性病人数已达3亿左右,其中不良生活方式导致了约60%慢性病的发生,慢性病费用支出约达5.5万亿元人民币。世界卫生组织调查显示
学位
“阿拉伯之春”后,中东地区出现的新热点问题再次拉近了美国与伊拉克库尔德人之间的关系,双方在共同打击极端势力“伊斯兰国”上的合作,使得伊拉克库尔德几乎成为美国的一个平等合作伙伴。在此过程中,伊拉克库尔德人也积极扩大自身影响力并为独立公投做准备,但此举最终在美国和伊拉克中央政府的共同反对下未能成为现实。本文旨在通过比较这一时期与之前历史时期美国对伊拉克库尔德的政策,在一个初步的分析框架下,揭示美国伊拉
学位
各国经济发展不平衡以及人力资源禀赋的差异是劳动力国际流动的主要动力。作为世界上最主要的外籍劳工输入国之一,无论是在依赖石油等劳动密集型产业的时代,还是在当今数字经济时代,沙特阿拉伯王国(1)都面临着劳动力资源优化配置问题,特别是如何引进和使用外籍劳工问题。因此,从全球化视角分析沙特的外籍劳工政策就显得至关重要。根据全球化对沙特的影响、沙特参与全球化的程度与经济发展水平,沙特外籍劳工政策的演变可分为
学位
在陕西省渭南市合阳县有一种用麦子加工而成的传统美术手工艺品,称“合阳面花”。合阳面花使用面粉加工制作出各式的造型和图案,并施以彩绘,造型生动、逼真。它的功能不局限于果腹,更表现在人际往来之中。合阳面花所表现出悠久而深厚的民间礼仪文化,承载了当地人对亲人的美好祝福、对自然的敬畏,代表了人民群众对美好生活的向往。合阳面花贯穿于一个人的一生,在重要时刻合阳面花承担起了不同的职责,因此在当地合阳面花也被称
学位
绩效考核是目前人力资源管理常用手段。在行政领域,绩效考核也有一定的适用价值,可以通过奖惩分明的管理手段,激励干部担当作为,切实加强对公务员的管理,有效提高公务员的业务能力和综合素质。我国也一直在探索将先进的人力资源管理手段融入公务员的管理中,改进公务员的考核方法。纪检监察干部也是国家公务员中的一员,同样需要进行考核。目前,随着纪检监察体制改革的不断深化,纪检监察干部的人数也在急速增加。随着干部队伍
学位
精准化、自动化、无人化所代表的智能农机是世界农机装备的发展方向,是提高农业作业效率、缓解农业从业劳动力压力的重要手段。但是在水稻种植领域,耕整、直播(插秧)、收获等作业环节无人化已发展较为成熟的情况下,植保环节因为其特殊的作业环境和作业要求,无人化发展较为滞后。因此,研究具有高精度、高适应性和高智能性的水田植保机有着重要的学术意义和巨大的社会经济价值。本论文针对水田植保机自动驾驶与无人自主面临的实
学位
风险与人类社会相伴而生,随着人类进入后工业时代,社会的复杂性和不确定性因素日益增多,贝克认为人类社会已经进入风险社会。社区作为人类生活的聚居地,在高速流动的社会状态下,也面临各种风险的威胁。比如:在新冠疫情防控过程中,社区作为疫情防控的基本单元,各类治理任务在属地化原则下汇聚到社区中,它既是疫情联防联控的第一防线,又是多元主体协同合作的主要场域,直接影响到疫情防控的治理效能。但是,受社区治理行政化
学位
企业在面临激烈的市场变化和市场竞争,要谋取生存,不断创新,稳健发展。安全领导和安全文化的建立为企业安全稳健的发展提供了坚实的基础。在企业寻求创新和突破的过程中,人才的意义举足轻重,而人才要充分发挥其潜能需要其有较高的心理韧性水平。员工如何的压力环境和逆境之中,激发积极情绪,自我学习、自我创新战胜困难,有赖于企业对员工心理安全感的提升和对员工心理韧性的开发和培养。本文旨在识别员工心理韧性过程,探究领
学位
黄河流域生态文明建设事关区域社会经济发展和人民幸福,现代煤化工产业大多布局在黄河流域,实现产业的可持续发展,必须重视黄河流域的煤炭、水资源的承载力以及大气、水等环境承载力。分析现代煤化工重点布局的鄂尔多斯、包头、榆林、长治和宁东5个地区的资源和环境承载力,并通过可持续发展综合评价方法,对5个地区进行可持续性评价。研究表明,鄂尔多斯在煤炭资源、大气环境和水环境承载力方面具有明显优势,榆林、包头和宁东
期刊
钻削加工作为最基础的切削工艺之一,常用于工件装配孔的加工,在航空、航天、汽车和船舶等制造领域应用广泛。以航空工业为例,一架飞机上装配孔的数量达上百万个,连接孔的加工约占据了总加工量40%。因此,高质量、高效率的钻削加工成为工业界一直追求的目标。本文以钻削加工为研究对象,围绕影响钻削质量和效率的颤振和刀具磨损开展了深入研究,主要研究内容包括:设计和搭建了开放式数控钻削加工实验平台。围绕课题研究内容,
学位