基于无人机平台的目标检测与人机交互算法研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:meihong
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着无人机控制技术的日趋成熟和人工智能技术的蓬勃发展,多旋翼无人机除了执行传统的航拍、植保、战地侦查等任务之外,还被赋予了主动跟踪目标,自主目标识别等智能功能。目前,多旋翼无人机大部分的应用还是集中在民用娱乐方面,而无人机的人机交互方式仍主要依赖于较为复杂的遥控器控制,遥控器较大的体积妨碍了小型多旋翼无人机的便携性,遥控器控制的操纵不便性阻碍了无人机使用人群的推广。因此,需要设计一种不依赖于外接设备的智能人机交互方法。人体姿态信息较为明显且对人较为亲和,通过计算机视觉与人工智能技术,对人体姿态信息进行识别,就可以完成人机交互任务。首先,针对无人机在空中飞行时机械振动造成拍摄画面抖动的情况,采用中心区域模板匹配的方法,在算法上实现了对无人机机械振动的补偿,使得画面较为稳定并易于后续算法处理。接着,对图像中的人体目标进行检测。考虑使用了两种解决方案,分别用于地面站和机上处理情况。第一种是使用结构复杂,运算量大的卷积神经网络检测器Faster R-CNN完成候选区域的生成,目标种类的分类与人体目标位置的定位,该方法准确度高,能够适应复杂的背景环境,但运算量庞大,无法在机载嵌入式计算平台上实现实时性。另一种是使用前景信息提取的方法生成候选框,再使用结构较为简单的卷积神经网络完成分类任务,该方法需要先对场景信息进行建模,但运算量小,可以在机载嵌入式平台上实现实时性。然后,对检测到的人的姿态信息进行识别。为了确定检测到的人是否为需要进行人机交互的对象,设计了一个挥手动作检测器作为人体姿态信息检测器的开关,增强了系统的安全性。对通过了挥手动作检测的对象,设计了4种明显的姿势,无人机通过对姿势种类的识别完成人机交互任务。为了提高运行速度并充分利用已处理信息,将框选到的目标前景信息直接作为特征输入多层全连接神经网络进行识别。最后,将算法移植到了机载嵌入式设备上并进行了飞行实验验证。结果表明,系统能够在保持较高识别准确率的同时实现了机上处理的实时性,能够很好的完成人机交互任务。
其他文献
“说实话,以前我并没有太多地关注过封面设计,对封面关注最多的是书名。”“总觉得封面设计跟我没关系,那是美编和责编的事,从教20年来从来都没有关注过这一内容。”“每当拿
<正>《纽约时报》的一位总编辑阿贝·罗森塔尔说"头版呈现给读者的并非只是一些重要新闻还包括本报编辑们对重要新闻的判别能力。头版不仅是新闻而是新闻加《时报》声誉"。将
作为工程项目管理中的一项重要环节,施工进度管理是对项目施工成本产生影响的一个重要因素。本文主要从工程总承包着手,简要阐述了总承包管理存在的问题并提出了具有针对性的
物联网(The Internet of Things,IoT)是一个将海量传感设备与互联网相结合起来而形成的巨大网络。在物联网中,海量传感设备不断地采集数据并发送到数据中心;随着感知技术与网
<正>"内容为王"的内涵1990年,美国维亚康姆(Viacom)公司总裁雷石东(Sumner M.Redstone)在决定公司发展战略——成为全球最重要的内容供应商——时提出:"谁做传送不管,我就是
本文通过分析了我国房地产金融风险管理存在的问题,分别从制度建设、土地流转、提高利率以及增加税收四个手段探讨了市场化手段在化解我国房地产金融风险管理问题的有效性。
目的:观察内补黄芪汤治疗慢性化脓性骨髓炎术后的疗效。方法:采用西医清除病灶,全身应用敏感抗生素;中医口服祛邪扶正、补气养血益肾之中药,外用活血、祛腐生新之中药治疗。
人岗匹配是人力资源管理的重要组成部分,在人员素质与能力发挥关键作用的机关事业单位,人岗不适、岗位协同失调等问题日益突出,成为影响行政管理体制改革深入的掣肘。而中国
目的研究膳食营养干预对妊娠期缺铁性贫血及细胞免疫功能的影响。方法选取2014年5月-2016年5月在该院门诊就诊的妊娠期缺铁性贫血孕妇210例,按照孕妇是否自愿接受膳食营养干
近年来,随着我国社会经济的高速发展和科学技术水平的不断提高,建筑行业在新时期也在突飞猛进的发展,作为我国国民经济的支柱型产业,建筑行业在现代建筑结构设计中广泛采用了