基于生成对抗网络的人物图像视频生成算法

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:chenshu541775136
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人物图像视频生成是计算机视觉领域中热门的研究方向,其根据给定的属性将原图像进行转换。例如姿态引导下的人物图像生成,其目标为在保留原人物服装纹理不变的同时将姿态转换为目标姿态,或服装引导下的人物图像生成,其目标为在保留原图像姿态不变的同时将服装纹理转换为特定服装纹理。人物图像视频生成具有广泛应用场景,例如电影特效制作、时装造型设计、虚拟试衣以及数据集增强,无论在学术界还是在工业界都具有重要的研究意义。现有的人物图像生成方法中得到的生成图像的纹理细节常常无法精确保留,另一方面,现有的人物视频生成方法生成的视频往往在时序上存在不一致的现象。针对上述问题,本文基于生成对抗网络就人物图像视频生成任务开展了研究,主要的研究内容包含了以下几个方面。在人物图像生成任务中,针对图像生成过程中基于关键点的姿态表示无法提供有效姿态约束的问题,设计了姿态引导的目标语义图生成器,使得预测的目标语义图在图像生成中提供更加准确的姿态约束。对于生成图像中存在伪影的问题,通过建立原图像和目标姿态表示之间的多尺度对应关系,实现了在细粒度图像生成过程中保留更多信息。利用人体语义图进行属性分割实现了在同一模型下完成姿态引导下的人物图像生成以及服装引导下的人物图像生成。定量实验结果以及定性实验结果均表明了所提出模型有效的提高了生成图像的质量。在人物视频生成任务中,针对视频生成过程中单张原图像无法提供足够外观信息的问题,采用了多张原图像做为网络输入,以在视频生成过程中提供更多的外观信息。通过使用全局-局部模块对原图像和目标姿态之间的流场进行修正以达到精确纹理迁移的效果。针对生成视频中时序不一致问题,设计了循环训练方式,提高了生成视频帧的时序一致性。定量实验结果以及定性实验结果表明了所提出模型能够有效保留视频帧的纹理细节以及有效提高视频帧的时序一致性。
其他文献
目的:探讨直肠癌腹腔镜根治术联合腹腔热灌注化疗共同作用后对进展期直肠癌的治疗效果。方法:选取2017年至2020年期间,我院收治的80例处于进展期肠癌的病例作为研究对象,以两组不同的方法展开试验。其中,对照组主要是以单纯的腹腔镜根治术来进行治疗,术后予以xelox方案化疗8疗程;实验组在对照组基础上予以腹腔热灌注化疗治疗,持续3周,术后予以xelox方案化疗6疗程。两组均于术后随访2年。比较两组患
学位
当代太空领域的探索离不开航天器的发展,而航天器控制技术则依托于态与轨道控制。在研究航天器态稳定与态跟踪问题时,不仅要考虑航天器的动力学模型,还要考虑内部参数的不确定以及外部干扰,因此这是一个复杂的非线性问题。针对这样一个系统中包含不确定性以及可能带有外部干扰的航天器态跟踪控制问题,本论文主要进行了以下几个方面的研究。针对航天器有可能存在内部的参数不确定以及外部干扰的情况,设计态跟踪滑模控制器,该控
学位
目的对比分析切开复位跟骨解剖锁定板内固定术中植骨与非植骨治疗SandersⅡ型跟骨骨折的疗效,以期为跟骨骨折的临床治疗提供参考。方法回顾性分析2016年12月~2019年8月安徽医科大学第三附属医院(合肥市第一人民医院本部及滨湖医院院区)收治的SandersⅡ型跟骨骨折患者共计65例,其中男46例,女19例,年龄24~60岁;其中高处坠落伤55例,车祸伤7例,重物砸伤3例。根据术中是否向复位骨折后
学位
目的:研究CPC-PMMA改性骨水泥和PMMA骨水泥临床应用效果的优劣,为PMMACPC改性骨水泥成为治疗OVCFs提供循证医学的证据并探索能够减少PVP术后并发症的更合适的骨水泥应用方案。方法:通过回顾性分析,纳入2019年1月~2021年12月共计100例使用PVP治疗OVCFs的病例。男性病人共计19例,女性病人共计81例;年龄分布在64至81岁,受累椎体分布在胸段11例,胸腰段74例,腰段
学位
近年来,多旋翼无人机因成本较低且机动性强等特点被广泛应用于各个领域,如军事搜索、火灾监控和灾后救援等。对于无人机的整个自主飞行阶段,因环境的复杂性与未知性,以及现有多旋翼无人机对着陆区地形具有较高的要求,其能否安全自主着陆成为一项挑战。现有关于无人机着陆的研究主要集中在基于合作目标的着陆,而实际任务中关于环境的先验信息往往是不可获得的,如信号丢失紧急降落等场景。因此,本文以多旋翼无人机在未知环境下
学位
从某种意义上讲,在机器人诞生之初人们就已经预见到了它的终极形态,即拥有媲美甚至超越人类的主动性和创造性。这个目标持续启示着人们从自己身上找到机器人技术突破的灵感,时至今日单体机器人的运动能力和感知能力都得到了长足的进步。机器人技术开始着眼于机器自身特有的优点,考虑更具灵活性和可扩展性的设计方式。自重构机器人正是基于这种理念的产物,它是一种能够自动变形重构、且具备多样运动能力的模块化机器人。机器人内
学位
量子控制是一门结合量子通信、量子计算以及量子精密测量的新兴学科,在最近几十年来迅速发展。随着人类对微观领域(如量子存储技术等)的深入研究,由于量子系统具有微观性、相干性、不确定性等新特点,经典控制理论无法完全适用于量子系统。因此,建立一套适用于微观系统的量子控制理论已然是势不可挡。本论文以线性量子系统为研究对象,考虑量子系统存在未知输入的实际情形,建立基于量子系统以及未知输入辅助模型的增广系统模型
学位
近年来,智能机器人越来越频繁的出现在大众视野,应用范围涵盖了从日常生活到国防科技的诸多方面,面对愈发丰富且复杂的生产生活需要,单机器人的应用存在更多局限,多移动机器人系统逐渐成为热门的研究领域。多机器人系统控制问题的关键在于,如何在保证子机器人正常工作的前提下,最大化系统整体的运行效果和性能。其中,多机器人系统的动态避障问题是一个重要分支,其研究成果有广阔的应用潜能,近年来的研究方案主要集中于对传
学位
目的骨关节炎(Osteoarthritis,OA)是一种高度流行的退行性关节疾病,其影响着全球范围内5亿多人的身体健康,并且已经成为老年人慢性致残的主要原因之一。目前已知的OA病理机制是多种因素导致软骨细胞炎症和凋亡,进而引起关节软骨破坏、软骨下骨重塑及骨赘形成,然而这些认知不足以阻断OA病情发展,手术治疗预后也存在多种并发症可能。本研究旨在探究长链非编码RNA(Long non-coding R
学位
研究目的:输尿管支架的植入是泌尿系结石手术中的常规操作,但也有一些副作用,如患侧腹痛、尿潴留、血尿等,其中输尿管支架结痂已也是泌尿系结石术后留置输尿管支架的并发症之一。因此,我们探讨影响输尿管支架结痂的因素以及比较其石痂和原结石成分的异同的成因。研究方法:收集2020年3月至2021年8月80例就诊于我院泌尿系结石术后输尿管支架结痂患者的临床资料和其原发结石以及肉眼可见形成石痂的输尿管支架。收集同
学位