论文部分内容阅读
伴随互联网和电子商务技术的快速发展,网络购物越来越受关注,网络购物不可避免的“虚幻性”特点与人们传统的“切身体验”购物理念相矛盾,促使虚拟试戴随着网购热潮应运而生,交互式虚拟试戴网购系统具有方便、友好、直观的特点,给买卖双方带来便利。一个2D自动虚拟试戴系统主要包括:目标检测、特征点定位、目标抠取、图像合成等步骤。影响虚拟试戴系统真正实用化的关键因素有:佩戴位置、佩戴者的姿态、背景光照、试戴真实性等。特征点精确定位和不同图像的无缝合成是解决以上问题的关键。针对以上问题,本文对人脸特征点定位、图像合成等进行了深入的研究,并在此基础上对相关算法做了创新性改进,完成眼镜、项链和手表的虚拟试戴。主要的创新工作内容包括:1)基于人脸特征点定位方法的改进。在研究人脸器官检测及主动形状模型(Active Shape Models,ASM)特征点定位算法之后,针对特征点定位算法存在的一些问题,对其做了一些改进,采用水平镜像方法增加训练集;改变局部纹理模型的建模方式:修改某些标注点的采样方向以更准确地反映该点的变化情况,将某些标注点的法线方向采样模式改为以该点为中心的矩形邻域采样模式,以获得更丰富的信息来描述该点;在目标搜索过程中采用多分辨率搜索策略以提高搜索效率和鲁棒性。将该算法应用于人脸特征点定位并获得精确的定位结果,为后续的虚拟试戴应用提供定位前提。2)基于单幅图像的眼镜虚拟试戴方法。在研究图像抠像和图像合成方法的基础上,提出了基于梯度域图像合成的变分模型并将其应用于眼镜的虚拟试戴,结合人脸特征点定位算法实现了自动、自然的眼镜虚拟试戴。3)基于单幅图像的项链、手表虚拟试戴系统设计方法。在眼镜虚拟试戴基础上,对眼镜虚拟试戴框架做适当修改并应用于项链、手表的虚拟试戴,合成生动逼真的项链、手表虚拟试戴效果图,完成虚拟试戴系统的设计。主要包括人脸特征点提取、手掌检测及梯度域图像合成技术。该框架可以用于其它饰品如服装、耳钉、耳环、围巾等的试穿中,也可用于影视制作等多媒体应用中。通过以上几个方面的深入研究,本文实现了人脸特征点的精确定位,并在此基础上实现了基于单幅图像的眼镜、项链和手表的虚拟试戴,解决了虚拟试戴在现实应用中的一些实时性低、成本高、真实性差等问题,取得了较好的研究成果。