基于卷积神经网络的热红外图像语义分割研究

来源 :安徽大学 | 被引量 : 0次 | 上传用户:xushaowei20092009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
可见光图像是外部光源照射拍摄物体表面经反射得到,而热红外图像却由拍摄目标自身发出的红外光波所形成的图像,所以红外相机能在黑夜无光源环境下有效成像。因此,对热红外图像进行语义分割,可以实现全天时全天候的图像分析和理解。热红外图像本质是对拍摄物体及其周围环境温度场的表示,具有低分辨率、弱对比度、弱纹理、轮廓信息不显著等特点。直接使用基于可见光的语义分割算法不能很好地处理热红外图像。本文就如何解决热红外语义分割问题展开相关研究,不仅取得了良好的分割精度而且满足实时运行要求。本文主要研究成果包含以下三个方面:第一,提出了一种基于门机制的边缘引导网络,实现精准的热红外图像语义分割。针对热红外图像存在的弱轮廓,弱对比度等问题,将边缘信息作为先验知识,设计边缘引导模块,使得网络更好地分割目标。由于额外引入的边缘信息可能存在噪声,干扰分割结果,所以又增加门机制抑制噪声。该方法在热红外图像语义分割数据集SODA取得良好结果,证明其有效性和先进性。此外还在可见光数据集验证并取得良好精度,证明该方法同样适用于可见光数据。第二,建立一个热红外图像语义分割数据集。由于缺乏有效公共的热红外图像语义分割数据集,本文制作一个热红外图像语义分割数据集“Segmenting Object in Day And night”简称“SODA”,并公开提供学术界研究使用。该数据集包含精心标注的图像和虚拟生成的图像。其中精心标注的数据集包含20种常见类别,采集的图像来自多角度的校园场景。由于人工采集和标注数据的工作量大且繁琐,本文还使用图像转换算法,将现有公开的可见光图像语义分割数据集转换成模拟热红外模态图像。最终SODA数据集包含两部分,一部分手工标注数据集,另一部分是算法合成数据集。第三,提出了基于MobileNetv2的实时热红外图像语义分割网络。尽管深度卷积神经网络虽然可以取得良好的分割结果,但其参数量大,测试时间长,若部署在移动终端无法满足低存储以及实时的要求。因此,本文选择MobileNetv2作为轻量级主干网络,在大幅减少计算参数的同时提取的特征具有良好的判别性。为了进一步减少参数量,在热红外图像语义分割的最后阶段,改进分割头结构,提出轻量级多感受野头结构。最后在热红外图像语义分割数据集SODA的实验表明所提出的方法虽然在精准度上略微降低,但达到了实时的运行速度以及低参数量效果。
其他文献
目的:观察疏肝健脾消瘿方联合左甲状腺素钠片治疗桥本甲状腺炎合并甲状腺功能减退症的临床疗效,证实疏肝健脾消瘿方应用于本病的疗效,总结中医药治疗桥本甲状腺炎的经验,为临床提供理论依据。方法:从2018年5月至2018年12月期间至深圳市中医院内分泌科门诊就诊并且符合纳入、排除标准的患者中随机纳入126例,采用随机数分组法分为对照组和治疗组,每组各63例。对照组予常规优甲乐治疗,治疗组在对照组常规处理的
北京、天津、深圳三城市被建设部和财政部列为全国首批国家机关办公建筑和大型公共建筑节能监测示范城市。据了解,随着我国经济的发展,国家机关办公建筑和大型公共建筑高耗能的
春节时,妹妹从国外回来,一家人难得聚在一起,厨房里煎炒煮炸,烹制平日里懒怠去做的复杂菜式,饭桌上说起一些寻常日子里不会谈起的话题. 小坛子的黄酒很轻易地就见了底,便拆启
期刊
在分析网络环境下大学生自主学习需求的基础上构建高校图书馆的自主学习平台,从而实现高校图书馆对自主学习友好支持的网络学习环境,对于高校图书馆提高服务水平,进一步践行教育
物流园区的建设发展是我国物流产业发展的重要组成部分和基础支撑,因此,需要对我国物流园区建设发展的情况进行总结研究,正确理解物流园区建设发展的内涵和实质,从而促进我国物流
文章从OPAC2.0的角度对我国“211工程”高校图书馆的OPAC系统进行了调查,并对其优点和不足进行了分析。
1 用了近两年的手机莫名其妙地滑到了课桌的缝隙里,继而掉到了地板上.不高的桌子,木质地板,捡起来后屏幕竟然碎了一半,我心疼得要命,但还是买了一款新手机. 我是个有怀旧情结
期刊
我国传统园林文化对现代景观设计仍有重大的历史价值和现实意义,其师法自然、因地制宜的造园思想,巧于因借、小中见大的空间处理手法,都为现代居住景观设计提供了良好借鉴。
本文对龙口北皂地区油页岩及其热解产物的基本性质进行测定与分析,包括铝甑分析、工业分析、元素分析、热值测定、模拟蒸馏及热解干馏气组成测定。针对固定床内单颗粒油页岩
随着改革开放的深化,医疗事业得到了前所未有的飞速发展,高、精、尖的科学技术不断应用于临床,护理工作从医院走向社会、家庭,现代医学已从生物医学模式向生理、心理、社会医学模