基于视听觉信息的机器觉察与仿生智能感知方法研究

来源 :西北工业大学 | 被引量 : 0次 | 上传用户:InsidedotNET
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着机器人技术的飞速发展,智能机器被广泛使用于特种救援、家居服务、空天探测和国防安全等国民经济的各个领域。由于智能机器大多工作在复杂危险的环境中,为了保障自身安全并顺利完成任务,对工作环境的准确感知就显得十分重要。但目前,现有环境感知方法大多是基于多源传感器数据的处理和融合而实现感知的,而对基于声图像信号的感知方法研究较少。为了提高机器对环境目标和事件进行感知的智能化水平,需要模仿人类觉察和感知特性来展开理论和方法研究。本文主要从听觉信息觉察、视觉信息觉察和异质信息仿生融合三个方面,针对基于显著性原理的异质信息仿生觉察方法和基于仿生知觉处理的异质信息融合方法进行了深入研究,取得的主要成果有:在听觉人工觉察方面,根据环境声音时频特点提出了一种基于异质显著性特征融合的听觉显著性检测模型。首先,通过提出一种基于短时香农熵的全局信息显著性估计方法来估计环境声音的背景信息。其次,通过提出一种基于人耳返回抑制效应的仿生计算化模型来模仿人耳的觉察特性,通过对声音时域显著性的校验来实现对混叠和多重显著信号的有效检测。最后,针对环境声音的非结构化特性,提出了一种基于频谱能量模糊分布的声音频域特征生成方法,并基于此提出了一种基于时频域特征结合的两层分类方法,从而获得关于显著环境声音的高层觉察知识。在视觉人工觉察方面,在采用由背景图像训练得到的过完备字典基础上,研究并提出了一种基于稀疏重构误差的物体性表示方法。同时,针对前景物体和背景在感知信息上的差异,提出了一种基于信息显著性的前景目标检测方法,从而实现对前景物体的仿生感知。随后,模仿人类视觉觉察特点提出了一种基于视觉显著性和信息显著性的仿生融合觉察方法,进而获取视觉的觉察知识。在异质信息融合方面,根据视听觉异质信息的知觉相关性和在觉察上的几率特性,提出了一种面向环境目标和环境场景的信息几率模型。同时,利用结构化显著性概念提出了信息几率的负属性来表示异常的环境物体和觉察信息。随后,研究并设计了一种基于异质信息的融合感知方法,从而针对不同环境能够完成多种感知任务。通过利用真实环境中采集到的视听觉数据进行仿真验证,结果表明采用本文方法可以实现对视听觉异质显著信息的仿生觉察,并能够利用觉察信息完成不同的环境感知任务。
其他文献
水体富营养化导致藻类过量繁殖,而且藻类数量有逐年上升的趋势。广东珠三角中山、珠海、深圳等地水源,藻类一旦爆发,就会对这些城市的水厂造成极大的威胁。ClO2作为一种新型
本文通过追溯晚清从咸丰驾崩到宣统即位这五十年间发生的关于皇权和继承权的危机,试图从朝廷官员的特殊视角,来看皇市的角色所体现出来的国家根基。文章表明,尽管晚清官员在
期刊
目的建立同时测定粮食中44种有机磷农药残留的固相膜萃取-毛细管气相色谱方法。方法样品用水超声提取后经固相膜萃取、乙酸乙酯洗脱,55℃氮吹浓缩至1mL后通过毛细管气相色谱
面对着复杂的国际国内形势和在新的历史条件下,高校思想政治教育工作面临着难得的发展机遇和严峻的挑战。如何适应时代的需求,不断改进和创新思想政治教育工作,是高校思想政
<正>毛泽东同志在1938年党的六届六中全会报告《中国共产党在民族战争中的地位》中提出,"个人服从组织,少数服从多数,下级服从上级,全党服从中央这四项最基本的纪律外,还需制
“现代性道德”的基本精神是其普遍理性主义的知识合法性和价值有效性诉求,由这一精神所支配的“现代性道德谋划”是可以理解的,但其寻求方式是有问题的,其可能实现的社会文
多向度公民教育理论产生于21世纪初期,作为一个全新的公民教育理论,多向度公民教育理论为现代公民教育理论的发展和实践提供了新的理论视野和思想资源。多向度公民教育的理论
<正> 余读英国 S.W.Busbell 箸中国美术(戴岳译本)云:晋侯平戎盘原藏北京怡王家。怡王者,清康熙帝之后裔也。至千八百七十年,盘为英人所得乃陈于英国博物院中。此盘浅腹侈唇,
期刊
动脉粥样硬化一直是我国医学研究领域的热点和重点。近三年来我国学者对动脉粥样硬化发生发展进行了大量工作,主要集中在动脉粥样硬化模型制备;自噬和凋亡、氧化应激、血管平
现代汉语作为高师中文专业的一门重要的专业必修课,担负着树立和强化学生的语言文字规范化意识、为学生将来从事中小学语文教学工作打下较坚实的语言文字基础的任务。在新课