基于SOM-RK3399的可穿戴式眼—机交互接口装置研究

来源 :中北大学 | 被引量 : 0次 | 上传用户:dafuxuan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
眼-机交互技术作为人机交互的一个重要分支,在助老助残、车辆辅助驾驶、人因分析、虚拟现实和军事等领域具有非常重要的研究和应用价值。随着嵌入式软硬件技术的发展,现阶段的眼-机交互装置所使用的处理器在处理能力及运算速度方面稍有不足,同时在便携式、可穿戴性等方面难以满足野外复杂战场环境的使用,从眼-机交互装置的发展趋势来看,眼-机交互装置逐步向小型化、智能化、可穿戴式的方向发展。针对军事领域野外战场环境的复杂性,便携式的眼-机交互装置能够有效提高武器系统的智能化水平,对于增强士兵的战场生存能力具有非常重要的意义,本论文基于ARM处理器高性能、低功耗、系统软硬件可裁剪的特性,以嵌入式计算机模块SOM-RK3399为硬件平台,设计了一种基于嵌入式设备的可穿戴式眼-机交互接口装置。首先,本论文通过查阅相关文献,总结现阶段眼-机交互装置的优势及不足,归纳了现阶段嵌入式技术的发展现状,提出一种以头盔式头戴设备和红外摄像头作为前端采集装置,以嵌入式计算机模块SOM-RK3399作为后端数据处理平台的小型化、便携、可穿戴式眼-机交互接口方案。并且从硬件层,操作系统层,应用软件层描述了眼-机交互接口装置的整体架构和工作流程。配置硬件系统初始化文件BootLoader,在Linux kernel中配置(Video for Linux 2)V4L2,LCD等驱动,通过Buildroot配置包含有QT和OpenCV库的根文件系统,搭建了眼-机交互接口装置工作的嵌入式操作系统。其次,基于嵌入式操作系统,详细阐述了基于V4L2架构的视频图像采集流程和编程时的相关参数设置。研究了本论文在图像采集时不同图像格式的转换关系。在获取到人眼图像后,制定了眼-机交互接口装置眼动信息采集的流程。最后,根据设计方案,搭建眼-机交互接口硬件装置,在硬件装置中移植基于二维点集的椭圆拟合自适应瞳孔检测算法。实验结果表明,对于分辨率为320×240,30fps/s的视频流图像,基于二维点集的椭圆拟合自适应瞳孔检测算法通过OTSU阈值计算,图像二值化,开、闭运算,边缘检测,椭圆拟合等步骤可以实现人眼图像的实时检测定位,且平均检测时间为7.2ms/fps。
其他文献
目前我国的棉花吸湿量测试方法与国际上采用的方法不同,为了提高我国棉花测试技术,积极采用国际标准方法,本文对我国的棉花吸湿量测试方法与国际上通用的测试方法进行了大量
在以机械化、电气化、信息化为典型特征的三次工业革命的基础上,智能化发展的趋势日益明显,人类社会在社会生活、生产制造等各个方面均受到智能化趋势的显著影响,特别是在工
田园综合体是依托乡村当地自然资源,进行农业资源建设发展的多功能复合模式。本文以桂阳县莲花谷农场为例,运用农用地适宜性评价基本理论,对农场进行农用地适宜性评价,将适宜
生物质能在未来清洁能源发展中的地位举足轻重,更是中国能源高效化、清洁化、安全化进程中至关重要的一环。在常规木质纤维素类生物质中,纤维素占比达到干重的3550%,有关其热
维生素D是维持人体健康的重要营养素之一。新近研究发现,维生素D不仅参与人体钙磷代谢,还可通过抗氧化应激、调节细胞增殖分化及细胞凋亡等多种非经典途径或替代途径参与机体
近年来,随着我国智能科技的发展,各种各类APP渗透到我们的日常生活中,记录下来的信息也呈爆炸式增长趋势。海量的数据开启了时代的转型,各个领域的企业纷纷开始重视数据并研
制备技术是获得高性能碳化硅多孔陶瓷的关键。综述了碳化硅合成方法和成孔方法对碳化硅多孔陶瓷一些主要的制备技术,主要包括烧成/烧结法、原位氧化反应结合法、反应烧结法、碳
物理图景的图形描述对问题解决有着多方面的影响。在实际教学中,尽管教师有意地培养学生物理图景的图形描述能力,但在问题解决中,有的学生仍会出现各种各样的错误。比如,物理公式书写错误,没有写出全部的解答内容,带错物理量导致计算结果错误等等,为什么会出现这些现象呢?因此,本研究从物理问题解决出发,研究物理图景的图形描述对解题质量的影响。在理论研究部分,笔者在查阅大量文献的基础上,分别完成物理图景的图形描述
随着经济全球化的不断发展和社会主义市场经济的不断完善,资源及资源间的考量和较量成为社会进程的关键要素,这促发了人们在不同领域内对各类资源的理论自觉和深入实践,思想
目的:探讨脊柱手术后患者尿管拔除的最佳时机,最大限度减少患者尿潴留及排尿踌躇症状的发生率,缩短术后留置尿管时间。方法:将脊柱手术留置尿管的住院患者360例依据所属责任