图像重定向与质量评价

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:lhz19700717
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着移动设备的普及和立体显示技术的发展,人们已不再满足于视觉上的可获得性,而更加追求视觉上的高享受性。图像重定向因其能够自适应地调整多媒体内容以满足不同终端的需求,而被广泛关注和研究。为了在满足设备显示硬需求的同时,兼顾用户视觉体验的软需求,质量评价往往被许多成熟的产业链考虑在内。因此,本文讨论图像重定向和质量评价之间的辅成关系。一方面,研究图像重定向的质量评价;另一方面,研究质量评价指导下的图像重定向技术。关于立体图像重定向的研究相对匮乏,亦没有公开的数据集。为了填补这块空白,我们建立了首个立体重定向图像的主观数据集SIRD。其涉及单算子、多算子在内的四种典型的立体重定向方法,包含图像质量、视觉舒适度、深度感和总体质量在内的四种立体感知评价维度,有着较强的代表性和较高的置信度。为了评估用户在观看立体重定向图像时的安全性,模拟人眼系统的双目感知机制,我们设计了首个基于混合失真聚合的视觉舒适度评价模型Hi-VCA。针对立体重定向中经常出现的结构失真、信息丢失、双目冲突和语义失真,我们分别设计了四种度量以全面地描述重定向对舒适度的影响。尤其是在双目冲突度量中,我们考虑包括视觉舒适区、双目竞争、窗口冲突和聚焦辐合冲突在内的异常双目感知机制,以更彻底地分析诱导视觉不舒适的因素。最后,实验结果表明,Hi-VCA模型不仅对于立体重定向图像,而且对于普通立体图像,均有着较好的舒适度评价能力,这在相关模型中极具竞争力和实用性。为了解决质量评价中数据量少、标注成本高这一难题,我们提出了基于主动学习的质量评价方案。对于传统的质量评价模型,我们设计了基于聚类的采样策略。而对于基于深度学习的质量评价模型,我们首先设计了一个双路的立体图像质量评价网络,然后提出了基于感知相似性的采样策略。实验结果表明,尽管缩减大约一半的标注代价,但能实现与使用所有样本点相媲美的性能。为了实现质量评价对图像重定向的反向优化,我们设计了基于强化学习的质量感知的多算子图像重定向框架SAMIR。首先,我们将多算子重定向任务模拟成马尔可夫决策过程。然后,提出了语义和美学感知度量作为强化学习中的奖励函数,一方面保证图像信息的正确传递,另一方面保证图像的视觉质量。最终,在不需要任何标注数据和低复杂度的情况下,实现了多步算子的自适应选择。SAMIR框架亦给用户提供了一定的创作空间,通过设计动作空间,调整重定向方向和比例,可以根据需求实现更为多样化的效果。
其他文献
自1997年,陈福康先生提出“民国文学”取代“现代文学”的设想以来,已经有将近20年的历史。20年以来,笔者认为,“民国文学”尚处在萌芽阶段,尚未形成一个学科,对于“民国文学”的概
吉林省安图县共有拖拉机2850台,农用车326台,驾驶员l805人,分散在298个村镇,给农机安全监理工作造成了很大困难。安图县农机监理站努力提高执法人员的素质,提高执法水平,严格要求监
新课改以来,随着国家提出培养学生的核心素养,对学生的教学要求也有所提高,就不单纯的像以前一样学习历史知识,而是要培养学生的历史核心素养,发现历史中真善美。在教学中,教
【正】张家界1、以旅游为先导,以张家界为集散中心,实施旅游业一体化建设,做强做优武陵山区"大旅游"产业,以旅游业带动其他产业发展。2、交通先行,加快构建区域内快速循环、
2005年9月20日,由中国承办的“2005年OECD农林拖拉机官方试验标准规则第13届试验工程师会议”在北京拉开帷幕。OECD官员和来自14个国家的52位拖拉机试验专家、部分中国拖拉机
新课程标准、新教材要求教学要“以人为本,发展个性”,这是新时期语文教学发展的方向,是素质教育的需求,也是培养现代化建设人才的根本要求。语文教学的个性化艺术对发展学生的个
随着新课程教育改革的不断推进,学生的教育受到社会各界的广泛重视,在很多社会人士的眼中,学生的知识教育责任主要应该由学校来完成,但是在各种各样的教学观察实践中,我们可
民族预科最突出的特点之一是民族性,民族性表现在民族文化的多样性。保持好文化的多样性,传承发扬优秀民族文化,促进各民族文化均衡发展意义重大。语文教育是挖掘、弘扬、传
近年来,随着信息自动化处理技术的高速发展,个人信息之保护成为我国法学界关注的热点问题。我国现对医疗健康信息相关法律问题的研究较少,对劳动者医疗健康信息保护问题的研
社会经济的发展速度超乎我们的想象,且近年来人们对物质生活的要求也逐渐提高。电力属于我们生活中不可缺少的重要能力,若生活中没有电力这一种能源,那么也会导致社会上各行