结合全卷积神经网络的室内场景分割

来源 :中国图象图形学报 | 被引量 : 0次 | 上传用户:toky868
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目的视觉假体通过向盲人体内植入电极刺激视神经产生光幻视,盲人所能感受到的物体只是大体轮廓,对物体识别率低,针对视觉假体中室内应用场景的特点,提出一种快速卷积神经网络图像分割方法对室内场景图像进行分割,通过图像分割技术把物品大致的位置和轮廓显示出来,辅助盲人识别。方法构建了用于室内场景图像分割的FFCN(fast fully convolutional networks)网络,通过层间融合的方法,避免连续卷积对图像特征信息的损失。为了验证网络的有效性,创建了室内环境中的基本生活物品数据集(以下简称XAUT数据集),在原图上通过灰度标记每个物品的类别,然后附加一张颜色表把灰度图映射成伪彩色图作为语义标签。采用XAUT数据集在Caffe(convolutional architecture for fast feature embedding)框架下对FFCN网络进行训练,得到适应于盲人视觉假体的室内场景分割模型。同时,为了对比模型的有效性,对传统的多尺度融合方法 FCN-8s、FCN-16s、FCN-32s等进行结构微调,并采用该数据集进行训练得到适用于室内场景分割的相应算法模型。结果各类网络的像素识别精度都达到了85%以上,均交并比(MIU)均达到60%以上,其中FCN-8s at-once网络的均交并比最高,达到70. 4%,但其分割速度仅为FFCN的1/5。在其他各类指标相差不大的前提下,FFCN快速分割卷积神经网络上平均分割速度达到40帧/s。结论本文提出的FFCN卷积神经网络可以有效利用多层卷积提取图像信息,避免亮度、颜色、纹理等底层信息的影响,通过尺度融合技术可以很好地避免图像特征信息在网络卷积和池化中的损失,相比于其他FCN网络具有更快的速度,有利于提高图像预处理的实时性。
其他文献
胸痹心痛的发生 ,除了心脉痹阻这一病机外 ,心脉绌急也是其重要的发病机制。受寒、情志所伤等可导致心脉绌急而发为胸痹心痛 ,临床上可根据发病特点、心电图改变、冠状动脉造
采用不同的有机二元酸对环氧树脂进行改性,然后用丙烯酸酯化,制备了柔韧性好的环氧丙烯酸酯,并对所合成树脂的黏度、柔韧性、耐冲击强度、附着力、硬度、光泽度、耐热性以及
皮带平稳、可靠运行是十分关键的问题,但是皮带运行过程中由于设备制造、安装及皮带带宽方向物料分布不均等原因难免出现皮带跑偏现象,因此导致胶质皮带寿命大幅度降低。皮带
目的:探讨中医食疗对冠心病的防治作用。方法:在冠心病预防工作中提倡中医食疗,做到每日饮食按冠心病预防食谱制定并坚持到底。结果:起到了预防危险因子发生;危险因素干预;防
在后金融危机时代,中国港口业供大于求的矛盾将日益凸显,对腹地货源的争夺将日趋激烈,对港口与腹地关系的研究进行综述不仅可以清晰地勾勒出港口业发展的历程和竞争模式的转
叙述对执教同题异构“细胞增殖”复习课的反思,从听课笔录以及自己在备课、上课、评课及对复习课的思考,探讨通过“同题异构”的平台,一起探究教学的艺术,交流彼此的经验,实现高效
目的观察快速康复外科理念在手术室腹腔镜胃肠道手术中的应用疗效。方法我院2017年4月-2019年5月收治的70例胃肠道疾病患者为本次研究对象,按照手术室腹腔镜手术治疗期间是否
采用外套预制钢筋混凝土墙对老旧砌体住宅进行加固,可以在提高结构抗震性能的基础上增加建筑面积。由于加固后的结构属于砌体-混凝土混合结构,结构动力分析具有一定的难度。
高放废物地质处置存在场景不确定性、模型不确定性、数据与参数不确定性等因素,其中数据不确定性是所有其他不确定性产生的重要根源之一。针对高放废物地质处置预选区场址的
<正>笔者所在学校遵循"小场地、大体育"的思路来开展"阳光体育运动",探索构建以民间体育游戏"6+1"活动为特色的一小时锻炼形式,通过为学生提供科学多样的民间体育游戏备选菜