嵌入式眼机交互系统的研究与实现

来源 :中北大学 | 被引量 : 1次 | 上传用户:jtk
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
作为人机交互领域中的一个重要研究方向,眼机交互技术已在医疗、辅助驾驶、虚拟现实和军事等领域得到了广泛地应用。传统的基于桌面式的眼机交互系统需要借助过多的硬件设备,不易穿戴,无法作为野外作战装备的辅助系统。因此,为了解放战士的双手,使其专心于武器打击装备的操作上,研究设计一款体积小,重量轻、易于集成且可穿戴的眼机交互系统对提高作战装备的智能化程度具有非常重要的意义。本文将嵌入式技术、图像处理技术相结合,针对嵌入式眼机交互系统展开了研究,主要工作如下:(1)针对传统的眼机交互系统体积大,便携性低,应用场景有限等问题,提出了基于嵌入式的眼机交互系统总体设计方案。系统以RK3399芯片作为主处理器,选用了支持UVC协议的USB眼行为监测摄像头,并完成了各功能模块的电路设计,采用了Linux操作系统作为系统软件平台。(2)依据嵌入式Linux操作系统的移植流程,完成了嵌入式开发环境的搭建、U-Boot和Linux内核的移植、根文件系统的制作、摄像头驱动的配置以及用于图像处理的Open CV库的移植。(3)设计了基于V4L2架构的眼部图像采集的软件程序,提出了一种运用图像处理技术进行眼状态和行为检测的算法。该算法首先对所采集眼部图像进行预处理,然后使用基于二值化图像的眼特征提取法和个体差异化阈值选取法对眼状态进行检测识别,最后通过连续图像帧处理的眨眼检测算法实现了对眨眼和特征眼行为的检测识别。(4)搭建眼机交互系统的测试平台,首先实现了PC机、虚拟机和开发板之间的网络连通;然后针对所设计的眼状态检测识别算法进行了实验,获得了将三种眼状态分开的阈值选取方法,得出了平均识别准确率为97.43%,平均处理速度为76.9FPS;再针对所提出的眨眼检测算法进行了实验,并对几种特征眼行为进行了分类,实验结果表明算法能够识别出长眨眼、双眨眼、三眨眼、眯眼等特征眼行为;最后以眼控望远镜作为背景,分析了用户的眼机交互规律,通过实验验证了眼控望远镜交互行为设计的可行性。
其他文献
致病菌每年造成数以百万计的感染,极大危害了人类健康。因此,开发简便、快速、高灵敏致病菌检测技术十分迫切。在目前的细菌检测技术中,生物传感因其小型化、低能耗、集成化等诸多优势而受到广泛关注。环状功能核酸具有高生物稳定性、热稳定性、以及能够以滚环扩增的方式合成DNA进行信号放大,在生物传感领域得到了广泛应用。环状功能核酸的制备通常是通过典型的酶介导的连接反应。然而,由于线性功能核酸自身复杂的三级结构以
学位
随着细菌感染现象的逐年增加,由致病菌引起的传染病已成为威胁人类健康的主要疾病之一。据报道,全世界每年有220多万人死于水源性传播的致病菌感染。在水源性和食源性传播的细菌中,最常见的细菌之一是大肠杆菌,其所导致的感染已成为临床治疗中的严重问题。预防和治疗细菌引起的感染性疾病关键是快速对病原菌进行分类与鉴定,因此,开发快速、高灵敏的大肠杆菌检测方法至关重要。液滴微流控技术作为一种新兴的技术,在单分子分
学位
黄连素作为一种抗生素,不仅抑菌、抗炎效果显著,在心血管系统和神经系统也有重要的应用前景。然而,大量生产和使用黄连素过程中产生的废水,若直接排放会对环境和生态的平衡造成严重的破坏。所以,我们迫切地需要对其进行有效处理,但是传统水处理技术难以满足要求。近年来,基于硫酸根自由基(SO4·-)的电化学高级氧化工艺因其高效、安全等优点而备受关注。产生SO4·-的方式有很多,其中电活化硫酸盐(SO42-)更为
学位
随着机器视觉、人工智能技术的发展,电路板检测朝着智能化、微型化方向发展。本文针对自动检测系统无法对没有原始设计图纸的电路板进行准确定位检测,进行了电路板焊点的识别定位和常见电子元器件的识别分类的研究,通过传统图像处理和深度学习在目标检测领域的应用,对深度学习网络模型进行了改进,在保证检测精度的同时提高检测的速度,实现了对电路板焊点的识别定位和对常见电子元器件的识别分类。本文是在国内外科研现状的基础
学位
氮氧化物(NOx)是一类严重的大气污染源,造成了许多自然环境问题,如臭氧破坏和酸雨等。目前我国NOx污染问题尚未得到完全控制,亟需寻求NOx深度减排路径。在众多脱硝方法中,CO选择性催化还原NOx(CO-SCR)是一种非常有前景的技术,其优点在于可同时消除CO和NOx两种大气污染物。双金属MOFs衍生物具有稳定性高、活性位点高分散和双金属位点协同作用等优势,引起CO-SCR催化领域研究者的关注。然
学位
我国北方地区冬季气候寒冷,污水生物处理系统常因低温冲击导致运行不稳定,脱氮效率大大降低,出水难以达标。通过将高活性的低温微生物投加到污水生物处理系统,增加低温条件下功能菌的活性和生物量是提高低温污水生物脱氮效果的有效手段。近年来,具有环境适应性强,生长代谢迅速,能够同步去除COD和NH4+-N,且能在同一空间内实现硝化和反硝化作用等优势的异养硝化-好氧反硝化菌受到广泛关注。基于此,本文筛选并研究具
学位
2021年,我国人口出生率和人口自然增长率再创新低,对儿童,尤其是对新生儿的重视逐渐上升到国家层面。而临床实践中,新生儿多参数监护仪心电电极所致医用粘胶相关性皮肤损伤(Medical Adhesive Related Skin Injury,MARSI)发生率为11.4%,是住院新生儿最常见的皮肤损伤类型,心电电极脱落现象更是频繁发生。无论是心电电极脱落,还是MARSI的发生都会增加了临床医护的工
学位
氯代挥发性有机化合物(Chlorinated Volatile Organic Compounds,Cl-VOCs)具有强挥发性、高毒性和易扩散性,已被公认为大气环境中的主要有害污染物之一,且对生态环境和人类生命健康造成巨大威胁。基于此,探索高效环保的Cl-VOCs控制技术成为当前环境领域的热点研究方向。近年来,电催化还原脱氯技术由于兼具环境友好性和出色的脱氯能力备受关注。然而,催化选择性差、反应
学位
近年来,由于人口快速增长、工业化快速发展以及可用淡水资源破坏,水资源短缺正成为一个严重的全球问题。膜分离技术在废水处理和水资源回收领域发挥着关键性的作用。其中正渗透技术(FO)具有能耗低,操作压力低,设备简单和结垢少等优点,正渗透技术和正渗透膜的制备都得到了快速发展,而高性能正渗透膜的制备是正渗透技术发展的关键问题。静电纺丝法制备的支撑层具有高孔隙率和互联孔结构,中间层的添加弥补了纳米纤维膜不利于
学位
近年来,越来越频繁的石化工业活动导致沿海城市的地下水中氨氮超标,酚类污染严重。纳米零价铁(n ZVI)材料通常依靠还原、氧化、吸附、共沉淀等作用去除地下水中有机、无机类污染物。以上过程伴随着n ZVI表面的自然化学腐蚀过程,该过程会在n ZVI材料中形成稳定的腐蚀层,且易受到地下水环境组分的干扰,造成n ZVI材料的反应性失活。为了解决n ZVI材料在长期使用后的容量衰减,活性降低等问题,同时降低
学位