基于深度学习的多特征场景识别研究

来源 :浙江师范大学 | 被引量 : 0次 | 上传用户:morningwind2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
场景识别是计算机视觉领域的重要研究方向之一,在许多方面都有广泛的应用。由于数据量的快速增长,传统的算法在解决大数据量的场景识别问题中表现出了许多的不足。随着卷积神经网络(CNN)的提出,基于CNN的场景识别方法也得以出现,通过训练好的CNN网络对场景图像进行特征提取,在此基础上进行多种空间全局特征的提取,使得场景识别的效果有了极大的提高。虽然CNN特征取得了令人鼓舞的表现,但是它们中一部分仅利用了场景中的空间特征。而另一部分虽然利用了场景类别间的对象特征,但其特征包括不同场景中共同对象引起的一般特征,削弱了场景间的区分能力。大多数现有的场景表示方法利用了类间独立场景中构成对象的特征,忽略了不同场景中普通对象造成的负面影响。通用对象的一般特征造成了不同场景之间的一般性,从而削弱了场景之间的判别特性。为了能够解决场景识别中存在的类内差异性与类间相似性问题,本文提出一种基于双卷积神经网络的场景识别系统和基于主题模型对象判别特征的场景识别方法,并以此为根据设计了卷积神经网络模型,应用于场景识别中。具体工作如下:1.现有的基于CNN的场景识别大多都只考虑了场景中的全局的空间特征而忽略了局部的对象特征,目前大规模场景识别的的识别率仍然不高。本文引入了卷积对象特征的概念,提出一种基于双卷积神经网络的场景识别方法,设计了两个CNN网络,包括场景CNN与对象CNN。一方面使用场景CNN网络提取场景图像中的空间特征,另一方面使用对象CNN网络提取场景中的对象特征,最后通过特征融合的方式将得到的特征输入到支持向量机中进行场景识别。2.为了研究场景之间的判别特性,本文采用自动方式检索抓取网页中的场景图片,选取图书馆、沙漠和游泳池三类场景,经过预处理,与Scene-15数据集组成包含5285张场景图片的Scene-18数据集用于研究相似场景的判别方法。3.不同场景中共同对象引起的一般特征的存在,削弱了场景间的区分能力。为了解决不同场景中普通对象造成的负面影响,本文提出了一种基于LDA主题模型的对象特征描述符LOD,并提出了一种基于主题模型对象判别特征的场景识别方法。并且利用双卷积模型提取全局空间特征与对象特征,基于主题模型的思想,构建“对象—图片—场景”的概率分布,选取每类场景中有判别特性的对象,构成LOD特征。将全局空间特征与LOD特征相结合,使用支持向量机进行分类。在Scene-15数据集和Scene-18数据集上测试上述的场景识别方法,并将仿真实验得到的结果与目前主流的场景识别方法进行比较。实验结果表明,基于双卷积神经网络的场景识别方法在Scene-15数据集上的识别精度高于目前主流的场景识别方法,但是由于引入了卷积对象特征,而忽略了不同场景中共同对象对于场景识别的负面影响,导致该算法对于特定场景的识别性能并不理想。而基于主题模型对象判别特征的场景识别方法,在Scene-15数据集和Scene-18数据集上均能取得最好的识别效果,并且由于该方法采用了对象判别特征,解决了一般对象的负面影响,在所有类别的场景中都取得了最好的识别精度。实验结果表明本文的设计的场景识别系统提高了场景分类性能,并具有良好的泛化能力。
其他文献
假想防卫是指行为人基于认识错误而对本不存在的不法侵害实施的防卫行为。这种行为具有不法侵害事实的不存在性,主观目的的正当性和行为结果的危害性三个特征。包括对人的假
社区的各项建设工作需要在社区工作者的组织、推动以及实践等社会活动中执行落实到位。社区工作者对于社会关系的协调、社会问题的预防和解决、社会管理服务水平的提升、社会秩序的稳定等都有着积极的推动作用。但是,由于缺乏健全的社会管理体制使得这些社区工作者的劳动没有得到足够的认可和相应的回报,造成很多社区工作中的优秀人才流失。本文通过以山东省青岛市的S区作为研究的对象,展开对该社区工作者的走访调查工作,希望通
同行评议是科技期刊非常重要的质量控制机制,而编辑、审稿专家和作者是同行评议过程中的关键因素,对同行评议制度的有效实施至关重要。本文旨在提出三者之间关系的重构与强化
利用2012—2016年安徽省41家A股上市公司财务数据,使用标准离差率度量企业研发投入真实波动,运用面板分位数模型检验研发投入波动对企业绩效的影响。研究发现:在10分位上,研
长久以来,西方传统的美学研究有着侧重理性思辨的传统,虽然也有休谟等人的重视经验的主张,但总体上来看,对美和审美的研究,美学史上更注重理性思辨。然而,人不仅仅具有理性,
湿地是自然界最富有生物多样性和生态功能最完备的生态系统之一,在调节气候、涵养水源、蓄洪防旱、净化水质、保护生物多样性等方面具有十分重要的环境功能和生态效益。洞庭
<正>学习兴趣是小学生进行数学学习的前提,直接影响着小学生数学学习的质量。因此,小学数学教学应十分重视学生学习兴趣的培养。受家庭因素、学校因素和教师因素的影响,很多
目的:使用类胶原蛋白制备复合BMP-2的新型水凝胶材料修复骨组织缺损,以期获得良好的骨修复材料。方法:分别制备类胶原蛋白(CL)、氧化羧甲基纤维素(OCMC)、N-琥珀酰基壳聚糖(N
目的:对亲子鉴定中检出的三带型等位基因座进一步探讨其发生原因,与同行共享。方法:亲子鉴定中发现一个体两个等位基因座(D21S11和Penta D)检出三等位基因,进一步采集其静脉
根据城市初期雨水径流的污染负荷初始冲刷效应以及主要污染物COD和N/P与SS成线性相关性的污染特点,对初期雨水的主要污染物COD和N/P开展了控制技术研究。以示范工程为基础,研