基于众包式眼动数据的视觉显著性预测模型及应用

来源 :浙江工业大学 | 被引量 : 0次 | 上传用户:lygzzm
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视觉显著性预测模型通过计算建模来模拟人类观看图像时的视觉注意力机制,预测图像中不同区域受到的视觉关注程度,可以应用于图像处理、视觉设计等领域。基于图像本身特征的视觉显著性预测模型存在精确性和扩展性较差的问题,而基于深度神经网络的视觉显著性预测模型能有效改进预测性能,但需要大量训练数据才能取得较好结果。引入眼动数据可以有助于对已有视觉显著性预测模型进行完善,但传统眼动跟踪方法受到设备成本、场地、操作过程等限制,眼动数据获取效率和实用性较低。为此,本文采用基于众包机制的眼动数据获取方法替代传统眼动跟踪,建立了众包式眼动数据集,在此基础上,训练基于全卷积神经网络结构的视觉显著性预测模型,并以静态网页图片为例进行了测试和应用。主要研究工作包括以下三个部分:(1)改进了基于用户注视点回忆的众包式眼动跟踪方法。在原有用户注视点回忆和自我报告的众包式眼动跟踪方法基础上,为了提高众包式眼动数据的精度和获取效率,通过用户实验,研究了在数据采集阶段不同参数对众包式眼动数据精度的影响,并针对蒙板图片、任务类型、刺激图片等进行了相应的优化,使众包式眼动数据的精度达到了1度视角,比已有方法的精度提高了3.57%。在此基础上,建立了面向静态网页图片的众包式眼动数据集。(2)提出了基于众包式眼动数据的视觉显著性预测模型。以静态网页图片为例,采用全卷积神经网络建立了视觉显著性预测模型。将图片和对应众包式眼动数据生成的热区图作为输入进行模型训练,通过最小化预测结果的损失值,使模型进一步学习人眼视觉感知特征。测试结果表明,与已有模型相比,线性相关系数提高了44.8%,相对熵降低了13.9%,验证了本文视觉显著性预测模型的预测精度得到了有效提升。(3)视觉显著性预测模型的应用。设计并开发了图片视觉显著性预测与辅助设计系统。用户通过上传图片,可以在线获得对于静态网页图片的视觉显著性预测结果,以及相应的设计辅助。实验结果表明,在本文系统的辅助下,网页设计师修改后的设计比初始设计的用户评分提高了8.18%,验证了本文系统的可行性与实用性。
其他文献
HEVC(HEVC:High Efficiency Video Coding)作为继H.264/AVC后的新一代视频编码标准,更加灵活与高效,相比于H.264/AVC缩减了接近50%的码率,编码性能也得到了极大提升。它的性
六维力/力矩传感器因其具备感知三维空间完整载荷信息的能力,在工业自动化、智能化进程中扮演着十分重要的角色。而基于不同解耦原理下的两类经典结构六维力/力矩传感器(Y形
粮食订单,本质是一种契约,是近几年来实行的一种新型粮食购销合同。粮食种植前,具有收购资格的企业和经营者用签订合同的方式向粮食生产者下单,确定收购粮食的品种与价格、数量与履约的时限等。本文基于粮农满意度视角,以浙江省某县级市桐乡市为例,着重分析现行粮食订单收购服务体系的实施情况及存在问题,进一步丰富和补充我国订单粮食收购服务体系的理论成果和研究内容,也为相关部门制定政策和开展工作提供新的思路和理论依
随着计算机应用技术与互联网技术的飞速发展,传统软件模式逐渐不能满足企业信息化对于软件使用的要求,云计算技术应运而生。云计算是一种通过互联网提供资源的模式,在共享经济模式的影响下,云计算技术可以使软件作为服务进行共享,软件的使用者不再需要涉及软件的安装、维护、升级等事项,能够有效解决企业在信息化建设过程中难以统一管理等麻烦。如今市面上多为一些B2C商业模式的软件共享系统,缺乏应用C2C模式的系统应用
目前现有的深层超限学习机(Extreme Learning Machine,ELM)算法具有以下缺点:当算法的网络层数较浅时,随机的特征映射使样本特征无法被充分学习和利用;当算法的网络层数较深
谐振式光纤陀螺(Resonator Fiber Optic Gyro,RFOG)是一种利用Sagnac效应实现的惯性角速度传感器。这种传感器目前尚处于实验室研究阶段。本论文采用两个铌酸锂相位调制器,提
本文在企业扩张与管理者过度自信的相关理论和国内外研究成果的基础上,运用理论研究与案例分析两种方法进行研究,对吉恩镍业由扩张而导致失败的过程、原因进行了总结、分析与
随着国家“一带一路”战略的提出,越来越多的中国企业踏出国门,走向世界,寻求更多的发展机会,更加广阔的国际合作。这期间必然会发生许多的商事纠纷,这就带来了国际法律的适
我国北方寒冷冬天气候寒冷,道路易结冰,引发的交通事故越来越多,给人们的生产生活带来严重的影响,因此道路结冰检测的意义显得尤为重要。由于国内外现有的道路结冰检测方法,
建筑工程的全生命周期涉及大量的利益相关者,各生命周期阶段的工程活动对利益相关者有着复杂的环境、经济和社会影响。通常人们只关注建筑活动所带来的经济收益和产生的负面