【摘 要】
：
目的 针对从单幅人脸图像中恢复面部纹理图时获得的信息不完整、纹理细节不够真实等问题,提出一种基于生成对抗网络的人脸全景纹理图生成方法.方法 将2维人脸图像与3维人脸模型之间的特征关系转换为编码器中的条件参数,从图像数据与人脸条件参数的多元高斯分布中得到隐层数据的概率分布,用于在生成器中学习人物的头面部纹理特征.在新创建的人脸纹理图数据集上训练一个全景纹理图生成模型,利用不同属性的鉴别器对输出结果进行评估反馈,提升生成纹理图的完整性和真实性.结果 实验与当前最新方法进行了比较,在CelebA-HQ和LFW(
【机 构】
：
西北工业大学电子信息学院, 西安 710072;虚拟现实内容制作中心, 北京 101318
论文部分内容阅读
目的 针对从单幅人脸图像中恢复面部纹理图时获得的信息不完整、纹理细节不够真实等问题,提出一种基于生成对抗网络的人脸全景纹理图生成方法.方法 将2维人脸图像与3维人脸模型之间的特征关系转换为编码器中的条件参数,从图像数据与人脸条件参数的多元高斯分布中得到隐层数据的概率分布,用于在生成器中学习人物的头面部纹理特征.在新创建的人脸纹理图数据集上训练一个全景纹理图生成模型,利用不同属性的鉴别器对输出结果进行评估反馈,提升生成纹理图的完整性和真实性.结果 实验与当前最新方法进行了比较,在CelebA-HQ和LFW(labled faces in the wild)数据集中随机选取单幅正面人脸测试图像,经生成结果的可视化对比及3维映射显示效果对比,纹理图的完整度和显示效果均优于其他方法.通过全局和面部区域的像素量化指标进行数据比较,相比于UVGAN,全局峰值信噪比(peak signal to noise ratio,PSNR)和全局结构相似性(structural similarity index,SSIM)分别提高了7.9 dB和0.088,局部PSNR和局部SSIM分别提高了2.8 dB和0.053;相比于OSTeC,全局PSNR和全局SSIM分别提高了5.45 dB和0.043,局部PSNR和局部SSIM分别提高了0.4 dB和0.044;相比于MVF-Net(multi-view 3D face network),局部PSNR和局部SSIM分别提高了0.6和0.119.实验结果证明,提出的人脸全景纹理图生成方法解决了从单幅人脸图像中重建面部纹理不完整的问题,改善了生成纹理图的显示细节.结论 本文提出的人脸全景纹理图生成方法,利用人脸参数和网络模型的特性,使生成的人脸纹理图更完整,尤其是对原图不可见区域,像素恢复自然连贯,纹理细节更真实.
其他文献
目的 单目相机运动轨迹恢复由于输入只有单目视频序列而缺乏尺度信息,生成的轨迹存在严重漂移而无法进行高精度应用.为了能够运用单目相机普及度高、成本低的优势,提出一种基于场景几何的方法在自动驾驶领域进行真实尺度恢复.方法 首先使用深度估计网络对连续图像进行相对深度估计,利用估计的深度值将像素点从2维平面投影到3维空间.然后对光流网络估计出的光流进行前后光流一致性计算得到有效匹配点,使用传统方法求解位姿,使相对深度与位姿尺度统一.再利用相对深度值计算表面法向量图求解地面点群,通过几何关系计算相同尺度的相机高度后
目的 体映射建立了两个3维体网格之间的对应关系,是计算机图形学中的重要研究方向.很多应用要求体映射是无翻转的,即其雅可比矩阵的行列式处处大于0.然而,现有的无翻转体映射生成算法经常无法完全消除翻转.挑战主要在于很难在保证满足位置约束的前提下消除映射的翻转.为此,提出一种新的无翻转体映射计算方法,核心是一种新的变形方法.方法 首先放松位置约束,然后在变形过程中通过线搜索的方式保证不产生翻转,最后将网格无翻转地变形到满足位置约束.为实现这个变形过程,提出一种雅可比矩阵引导的变形算法.虽然现有的无翻转体映射方法
近年来,关于大学生食品安全的事件时有发生,学校食品供应主要有3个渠道,即堂食、正常餐饮配送以及学校专属的食品供应商或餐饮店.学校内的食品安全问题是人们较为重视的问题,一旦学校食品出现安全隐患或者是造成了较大的安全事故,将带来严重的社会负面影响.因此,本文对当前新时代大学生的食品营养与健康进行深刻思考,并提出改进大学生饮食营养与健康的措施,期望能够让大学生认识到食品营养与健康的重要性,从而注重自己的饮食健康与安全.
豆制品生产过程中,浸泡工序直接关系到最终产品出品率,本文论述了大豆原料、浸泡水质、浸泡水量、浸泡温度与时间、pH值、搅拌和排酸等要点对大豆浸泡工序的影响,并对实际生产提出建议.
本文对芽苗菜汁与椰果的复配饮料进行研究.芽苗菜加水比例3:8制备芽苗菜汁,与椰果浆体的复配比例为4:1.通过单因素试验、正交试验和感官评价得出柠檬酸的最适加入量应为1.0％、白砂糖的最适加入量为3.0％,阿拉伯胶的最适加入量应为0.5％.最终饮料既有芽苗菜的营养物质又含有膳食纤维成分,pH值为5.1～5.6,可溶性固形物含量为68％,组织细腻均匀,口感爽口,符合营养代餐、养生保健等市场需求.
目的 当前点云补全的深度学习算法多采用自编码器结构,然而编码器端常用的多层感知器(multilayer perceptron,MLP)网络往往只聚焦于点云整体形状,很难对物体的细节特征进行有效提取,使点云残缺结构的补全效果不佳.因此需要一种准确的点云局部特征提取算法,用于点云补全任务.方法 为解决该问题,本文提出了嵌入注意力模块的多尺度点云补全算法.网络整体采用编码器—解码器结构,通过编码器端的特征嵌入层和Transformer层提取并融合3种不同分辨率的残缺点云特征信息,将其输入到全连接网络的解码器中,
目的 点云分类传统方法中大量依赖人工设计特征,缺乏深层次特征,难以进一步提高精度,基于深度学习的方法大部分利用结构化网络,转化为其他表征造成了3维空间结构信息的丢失,部分利用局部结构学习多层次特征的方法也因为忽略了机载数据的几何信息,难以实现精细分类.针对上述问题,本文提出了一种基于多特征融合几何卷积神经网络(multi-feature fusion and geometric convolutional neural network,MFFGCNN)的机载LiDAR(light detection an
苦荞糖浆具有苦荞的主要生物活性成分,目前的研究表明苦荞活性物质在抗氧化、抗癌、降血糖、降血压和降胆固醇上有明显的功效.其工业化制备可以为三高病人提供功能性食品、药品的甜味剂和添加剂,使患者在减低血糖的同时还可以享受甜食.本文在多酶法提取苦荞糖浆的工艺基础上设计了中试苦荞糖浆生产线,采用半自动化生产出苦荞糖浆、苦荞精、苦荞膳食纤维粉3种产品,填补了国内乃至国际苦荞糖浆产品空白.
目的:了解广东省阳江市阳东区2018—2020年居民户食用加碘盐现状,及时掌握人群碘营养状况,为采取针对碘缺乏病的防治措施和科学调整干预策略提供依据.方法:按照《阳江市阳东区碘缺乏病监测方案》,对阳江市阳东区居民户随机抽查食用加碘盐,采用《制盐工业通用试验方法碘的测定》(GB/T 13025.7—2012)中的直接滴定法进行定量测定.结果:阳江市阳东区2018—2020年居民户食用盐非碘盐率为0,碘盐合格率为100％,碘盐覆盖率为99.8％,合格碘盐食用率为99.8％,食用盐盐碘均值为27.25 mg/k
目的 3维点云是编码几何信息的主要数据结构,与2维视觉数据不同的是,点云中隐藏了3维物体中重要的形状特征.为更好地从无序的点云中挖掘形状特征,本文提出一种能够端到端且鲁棒地处理点云数据的多维度多层级神经网络(multi-dimensional multi-layer neural network,MM-Net).方法 多维度特征修正与融合(multi-dimensional feature correction and fusion module,MDCF)模块从多个维度自适应地修正局部特征和逐点特征,并