基于全景图解耦的单幅室内图像光照估计研究

来源 :武汉大学 | 被引量 : 0次 | 上传用户:melancholy111
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于图像的光照估计的目标是预测在输入图像拍摄时空下指定插入位置处接收到的全景光照信息,因此神经网络预测的光照应该具备全景性、时空相干性和空间变换性。作为增强现实技术获取真实感的重要先验条件,光照估计在医疗健康、军事模拟、教育和娱乐等多个领域都具有广泛的应用前景。然而考虑到复杂的室内场景结构以及单幅图片视角和动态范围的限制,光照估计也是一个十分具有挑战性的任务。目前的方法要么没有对光照的特性进行拟合,限制了虚拟物体插入的位置;要么使用参数化的光照表示形式,忽略了光照的高频语义特征,导致在渲染三维虚拟物体时无法适应不同的材质属性;又或者在设计神经网络时没有充分考虑光照位置的准确性或语义结构的一致性,使得生成的光照不准确或者缺乏真实感。着眼于现有方法的缺陷,论文通过将原始光照估计任务分解为全局光照估计和空间变形两个步骤来满足光照的固有属性。之后采用HDR全景图的光照表示形式,并使用解耦的思想将HDR全景图分解为光照信息和语义结构信息来满足不同材质的渲染需求。在训练策略上采取了分步子任务的训练形式,并且引入了光照注意和语义提取的模块来提高网络的性能。论文的主要贡献可以概括为以下三个方面:(1)基于光照解耦的思想将全局光照估计分解为以下三个子任务:主光源分布估计、语义结构补全以及逆色调映射,并且根据不同子任务的特点设计了不同的网络结构和训练策略,提升了预测光照信息的准确性。(2)创新性地提出了使用虚拟物体外接边框的中垂线来表示插入位置的方法,避免了体积超参数的引入;并且构建了相应的3D变形模型来依据插入位置的上下端点和中点定位虚拟相机的空间坐标,实现了像素级别的空间变换光照。(3)创建了一个包含18,621个数据元组的大型数据集,每个数据元组都包含各个子任务输出的真实标签。此外,由于该数据集制作流程采用了集成的自动化算法进行处理,因此该数据集的数量容易扩充。基于三维物体渲染的定量与定性实验结果显示,论文提出的方法能够提供更加准确、更加吸引人的光照估计结果,并且对于虚拟物体材质的适应性以及对光照固有性质的拟合能力都优于现有方法。此外,论文还对提出的关键组件进行了消融实验,证明了各个组件的有效性。
其他文献
目的 探究儿童间歇性外斜视集合不足型合并下斜肌亢进经外直肌倾斜后徙联合下斜肌后徙术治疗的临床价值。方法 选取2019年6月-2021年6月在洛阳博爱眼科医院接受治疗的160例患儿开展研究;均患有儿童间歇性外斜视集合不足型合并下斜肌亢进,并采取外直肌倾斜后徙联合下斜肌后徙术治疗,评估患儿治疗前后斜视情况。结果 不同时间段,患儿斜视度变化显著,恢复状态良好,与术前相比较P <0.05;术后患者眼球FD
期刊
中药复方即方剂,是指在辨证论治的基础上依据病情的需要,有选择地将药物按照一定的配伍原则组合而成的用药形式。目前中药复方配伍机制的研究方法/策略主要围绕药效物质分析(包括中药化学成分分析、入血药源成分分析、药动学分析)和药理信号通路分析(包括网络药理学分析、信号通路指标检测、代谢组学分析)两方面进行。在今后的研究中,应以“七情和合”“升降浮沉”“君臣佐使”“四气五味”为基础探究中药复方的配伍关系,并
期刊
未能达到分析师共识盈利预测的上市公司,将无法满足投资者的预期而引发激烈的市场负面反应。在面对具有普遍乐观倾向的分析师预测所带来的盈利压力时,管理层会利用信息披露沟通工具,通过降低年报信息披露语调直接和主动地干预过高的投资者预期,以对冲外部盈利压力带来的潜在风险或增加意外惊喜的机会。本文从信息不对称和行为金融学等理论出发,基于中国上市公司2014到2020年的数据实证检验了外部盈利压力对管理层语调的
学位
2021年为国家十四五规划开局之年,在全球经贸规则博弈日趋激烈,疫情导致国际经贸合作壁垒持续增加的大背景下,中国积极构建“双循环”新发展格局,经济稳步复苏增长。与此同时,国家加快金融体制改革和市场开放,资本市场先后推出新证券法、公募REITS基金、放开外资准入等多项举措,2022年1月,《关于规范金融机构资产管理业务的指导意见》进入全面实施阶段,理财产品净值化管理步伐加快,中国金融发展格局迈入新的
学位
为解决戊8-22310综采工作面刮板输送机功率过大、能耗高及与采煤机功率不匹配的问题,降低设备能耗及回采成本,对基于S6-400PLC、变频器及KXJ0.2-1120集控箱的采煤机及刮板输送机协同调速系统进行研究,系统对刮板输送机负载率进行分析,通过变频器发出指令调节刮板输送机运输速度。现场应用后,工作面每季度有效生产时间增加25%,单班产量提升700 t,节省电费25万元。
期刊
随着科学技术的进步、企业学习能力的增强以及资讯的发达,产品的同质化越来越严重。随之而来的,是企业之间的竞争越来越激烈。律师事务所之间的竞争也呈现出这样一种竞争态势,进入人们所说的“红海”竞争状态。律师事务所如何站在更高的战略高处,把眼光放得更加长远,努力寻找新的服务领域;如何顺势而动,及时根据外部环境和内部条件的变化调整律师事务所的竞争战略,提高自身的核心竞争力,为律师事务所寻求更好的发展空间,摆
学位
长期以来,“新闻立台”是省级电视台地面频道的立台之本。MS电视新闻栏目开播15年,是全国省级地面频道中的品牌电视新闻栏目之一,栏目一直采用制片人制,强调制片人在栏目管理中的重要作用。2016年,国家提出媒体融合新战略,电视新闻栏目在创作、播发、管理方面都面临新的挑战。融媒体发展强调多人合作,团队管理。为适应新的发展要求,栏目管理正在以单人为主导的制片人制向以团队为主体的团队管理转型。因此,研究融媒
学位
改革开放以来,随着我国市场经济体制的逐渐发展,我国各行各业都迎来了翻天覆地的变化。因此,对于商业行业的模式创新研究,近年来已成为一个重点关注内容。为了更好地促进在不同产业集群的模式下各大中小企业的稳步发展,就要对市场的商业形式进行充分了解,以市场为导向,赋予旅游酒店相关企业独特的经营特点与潜在价值,从而使其逐步适应时代的发展变化,在经济全球化的形势下生存下来。本文基于此背景,通过三个月的研究,总结
期刊
目前,煤矿井下生产长期面临人工投入成本高、工作量较大、生产效率低、缺乏安全性等问题。针对这些问题,通过调研设计了“三机”协同的远程智能化控制系统。首先对该系统进行了三维模型的模拟计算,并利用计算机对远程操控的终端和控制模式进行了详细设计。随后,将该智能化控制系统应用于井下综采工作面,对各项参数进行比对得出结论。该“三机”智能化控制系统对设备的安全状况有了很大的改善,在很大程度上提高了生产效率。
期刊
甘肃省煤炭资源的大规模开采和利用为经济社会发展做出巨大贡献,但是煤炭资源的开采也造成生态环境的破坏。本文结合甘肃省煤炭资源型城市实际情况,提出以绿色政策促进产业升级发展、在新发展理念下推动生态环境转变、加大人才引进力度、加大政策扶持和激活煤炭资源型城市经济活力等对策建议。
期刊