基于深度学习的无参考立体图像质量评价方法研究

来源 :南京信息工程大学 | 被引量 : 0次 | 上传用户:cenyizhon
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息通讯行业与多媒体网络的发展,立体视觉技术被广泛应用于影视、医疗、军事、航测遥感等领域并占据着至关重要的地位。随着应用的深入,各领域对立体图像质量的要求也在不断提高。然而在环境因素和硬件条件影响下,这些立体图像会不可避免地遭受各种类型的噪声,造成图像质量下降,无法满足其后续应用的需求。因此,为了衡量立体图像质量好坏,为生产应用和学术研究提供客观的质量评价指标与依据,研究高效、准确的客观立体图像质量评价算法尤为重要。客观评价模型分为全参考、半参考以及无参考三种类型,由于前两者均依赖于原始图像信息,而实际场景中参考量具有局限性,所以目前SIQA算法研究方向主要集中于无参考评价领域。针对无参考客观评价模型,本研究内容包含以下两个方面:(1)提出了一种基于单双目视觉特征融合的无参考立体图像质量评价算法。该算法将多种图像内容特征相结合,包括传统手工提取的颜色、纹理、边缘等视觉特征,以及卷积神经网络模型自动学习的深层视觉特征。通过将两种特征进行整合,使得单目视图能够被提取出更加丰富的组合特征向量。与此同时,算法考虑了立体图像与平面图像的差异性,以视差图像的双目感知特征作为评价模型的深度信息,并与单目视图特征融合,最终由全连接层实现失真图像质量分数的回归预测。在LIVE 3D-IQA数据库上的实验结果表明,所提算法预测性能与人眼主观感知一致性较高。(2)提出了一种基于交互式卷积神经网络的无参考立体图像质量评价算法。该算法受人类视觉感知路线启发,首先依据双目求和通道以及差分通道理论,将左、右视图合成为双目图像,并经过浅层CNN模型提取出低级视觉特征整合为初级视觉皮层的输出信号;然后模拟HVS视觉通路设计了双流深层CNN结构,并额外添加了交互连接方式,以表征高级视觉皮层对图像信号深度特征感知的复杂过程。实验结果表明,与一些主流的SIQA算法相比,所提算法的整体性能及单一失真类型的评价性能都有较好的表现,能够作为一个通用高效的NR-SIQA算法。
其他文献
<正>目前的大部分作业设计均以一节课的巩固知识为目的,作业形式单一,缺乏灵性,对开放的自主探索空间关注不够,较少打通单元内部关联,从学生思维品质发展的角度进行整体架构。不少学者表示只有教师在进行单元设计时,才能看到价值观念。因此,我们有必要进行单元主题架构统领下的作业设计,即结合单元主题,突破课时限制,深挖内容本质,整体把握结构,以发挥作业的再学习功能,促进学生素养的整体提升。
期刊
《国际中文教育中文水平等级标准》(以下简称“新《等级标准》”)是一部聚焦语言本体、中华文化特色突出的国家标准。其文化特色之一是体现了汉语作为中华文化载体的自身的独特性;其文化特色之二是体现了具有中华文化特色的系统性思维方式;其文化特色之三是注意发挥汉字超时代、超地域的特点。我们可以在新《等级标准》指导下,借助《国际中文教育用中国文化和国情教学参考框架》,放下对文化大纲的执念,放下“用中文教文化”的
有效的课堂教学质量评价能以评促教。与结果导向的评价方式相比,基于课堂观察的课堂教学质量评价能够捕捉“教师的教”和“学生的学”相关细节,有利于暴露教学问题,优化教师的教学行为,提升学生的学习效果,最终提高课堂教学质量。课堂教学质量评价分为整体性评价和基于特定视角评价。整体性评价看似面面俱到,但只能呈现一个整体的教学印象,教师难以根据评价结果作出细致化教学改进。基于特定视角展开评价,有利于细致刻画教师
<正>林徽因(1904—1955)生前没有出版文集,直到1985年,才由人民文学出版社出版了第一部作品集《林徽因诗集》(收诗55首,仅80页)。此后出版的文集有陈学勇编《林徽因文存》(四川文艺出版社2005年版)、《林徽因诗文集》(北京理工大学出版社2009年版)等。2012年新世界出版社出版的《林徽因全集(套装1—4册)》和2014年人民文学出版社出版的《林徽因集》(梁从诫编,共三卷四册)。
期刊
<正>漫漫长夜,是谁点亮你一隅的光明,烈烈炎日,是谁给予你荫蔽的清凉?是我们的眼睛不够明亮吧,总忽视这点点滴滴的感动。当修船工顺手补好破洞使船主重获生命,当拾荒老人几十年资助上百名大学生时,你才发现原来这善良,竟能在心底开出这般美丽的花朵,恰若在希望的彼岸,摇曳出人性的高贵。善心是花蕊,香远益清。拥有一颗善良的心的人总会时时考虑着他人,诠释着"勿以善小而不为"。阿里木作为一名收
期刊
在倡导以残疾学生随班就读为主体的全纳教育背景下,中小学各类学生的心理支持工作尤为重要。文章通过分析随班就读学校心理支持工作的现状与问题所在,进一步探讨心理健康教育、学校心理学及特殊儿童心理与教育三个学科领域协同开展适应残疾学生特点与需求的心理支持工作的可行性,建议从学生、专业人员及工作模式三方面来提升学校心理支持工作。
推动革命老区20个重点城市与东部城市开展对口合作,是支持革命老区走出振兴发展新路子的创新之举,也是对我国区域互助机制的有机补充和完善。从对口支援、对口帮扶、对口合作三者的比较看,政府参与度依次减弱,市场参与度则依次增强,即对口合作更加强调“市场运作”。在此框架下推出的革命老区重点城市对口合作,充分继承了既有区域互助结对基础并将范围进一步拓展,合作内容也超过了东北与东部地区部分省市对口合作,有配套财
对口支援是我国区域一体化的制度优势。在对口支援的具体事务中,中央政府的角色逐渐让位于地方政府。从时间维度看,对口支援分别经历了国家主导下的扶贫、合作、共同发展与富裕三个阶段;从政府间关系角度看,我国区域发展的差异性不仅体现为自然禀赋的差异,也体现为省级行政区,甚至市级行政区内部的政策差异,由此对口支援的国家宏观制度就形成了多任务的政府间合作。随着城市化的推进与特定区域产业政策的深入,市域日益成为普
反渗透技术广泛应用于水处理系统,现有的电站锅炉供给水处理系统中,未透过反渗透膜组件的高压浓盐水一般经减压阀排放,造成了大量压力能浪费。本文将一体化能量回收液力透平装置应用于电站除盐水反渗透系统工艺,以提高高压浓盐水的压力能量回收利用率,减少系统电能消耗,降低生产成本。首先,确定了电站锅炉供给水处理系统总体设计方案,针对现有的电站除盐反渗透工艺中高压浓盐水浪费问题,在现有工艺系统中增加一体化液力透平