光场图像去雨和亮度增强算法研究

来源 :江南大学 | 被引量 : 0次 | 上传用户:en2113
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
相比于传统的二维图像,光场图像(LFI)通过全光相机捕获每条入射光线的方向和位置,同时记录了场景的纹理内容和三维结构信息,在计算机视觉任务中拥有巨大优势。但是,在降雨天气采集的光场图像由于雨条纹和雨雾的遮挡,导致背景信息缺失。在低光照条件下采集的光场图像存在亮度低、噪声大等问题,导致图像质量降低。光场图像的修复与增强一直是计算机视觉领域的难点。因此,本文提出了一种光场图像去雨算法和一种低照度光场图像增强算法,主要内容包括:1)提出了一种基于多尺度高斯过程的光场图像去雨算法。为了充分利用光场的结构信息,将光场图像的所有子视图作为输入,采用4D卷积层构建去雨网络来同时处理LFI的所有子视图。在该网络中,首先雨水检测模型引入半监督学习,通过多尺度自指导高斯过程模块计算真实世界雨条纹的伪真值,在多个尺度上对合成降雨LFI和真实世界降雨LFI进行训练,从而准确检测雨条纹。然后将所有减去雨条纹的子视图输入4D残差网络来估计深度图。最后,输入子视图与相应的雨条纹图和深度图连接,进入无雨LFI恢复模型中,通过对抗递归神经网络来逐步消除雨条纹并恢复无雨的LFI。在合成LFI和真实世界LFI进行了广泛定量和定性评估,证明了所提出方法的有效性。2)提出了一种多尺度特征融合的低照度光场图像增强算法,引入数码单反相机(DSLR)图像来监督网络的训练以提升低照度光场图像的质量。为了充分挖掘和利用光场信息,首先通过角度和空间Transformer在不同尺度上对光场图像进行特征提取,捕获每个子孔径图像的互补信息以及局部和远程依赖关系。然后进入循环融合模块,通过局部和全局融合层自适应地聚合整个特征空间中的有用信息。最后利用4D残差网络从聚合的特征中重建光场子视图。实验结果表明,所提网络能够有效地提升低照度光场图像的质量且性能优于其他算法。
其他文献
随着铁路运行速度不断提高和载重的增大,轨道所承受的冲击力愈来愈大,准确把握轨道质量状态变化规律、合理安排维修计划成为铁路部门的重要职责。论文以轨检车检测轨道不平顺问题为研究对象,挖掘轨道状态变化规律,并构建科学合理的预测模型实现对轨道质量的预测,最后进行维修计划的科学化实现。论文的研究成果对准确把握轨道质量状态变化趋势、提高轨道养护及维修质量、确保铁路运输安全等方面均具有重要作用。论文主要研究工作
学位
随着我国高等教育事业蓬勃发展,高校招生规模不断扩大,高校基础设施建设也驶入了快车道,但目前我国高校基建项目竣工结算进度却普遍存在延迟滞后现象,直接导致总体验收进展缓慢,极大程度地影响工程项目交付使用。因此,确定影响高校竣工结算进度的指标因素,构建高校基建项目竣工结算进度评价模型,并提出改进措施,对于提高高校竣工结算效率,及时交付使用具有重大意义。首先,对文献及高校多项目竣工结算进度滞后的案例进行调
学位
伴随着城市建设的快速发展,人们对人文环境生活的质量提出了新要求,对城市文化景观的建设提出了新需求。文化是一座城市的灵魂,是城市魅力所在。河流文化是城市文化中的重要组成部分,文化元素贯穿城市从诞生到繁荣发展的全过程。文化景观是城市文化特性彰显的重要场所,丰富的文化景观场所精神营造是城市居民幸福生活的象征。为提升市民生活中的文化氛围,展现河流文化风采,增添城市文化魅力,各政府相继出台了相应的政策制度。
学位
科技大数据作为一个国家和区域第一生产力和第一动力形成的基础性战略性资源,对从事科学研究的人员有着至关重大的意义。因此,研究科技大数据的关系预测与推荐对增强科技大数据的智能化管理和分析、促进科研合作以及提高科研成果产出有着重要意义。本文通过构建科技知识图谱来研究科技大数据中有价值的知识,运用知识图谱嵌入技术、知识推理技术以及推荐算法,借助多任务学习机制的思想和图神经网络框架对知识图谱的关系预测与推荐
学位
印章也称图章,是用来印于文件上表示鉴定或签署的文具,同时也是各种经济组织进行各项业务,保证日常正常运营的重要工具。尤其对于企业来说,印章在企业的各项市场经济活动中发挥着至关重要的经济作用和法律效力。随着我国经济的发展,HD公司作为一个全国性的房地产企业在规模上得到了很大的发展。但是由于扩张速度过快,又缺乏有效的印章风险管理体系,HD公司频频发生私用印章、盗用印章、越权用印、私刻印章、抢夺印章等一系
学位
<正>变压器是电力系统中至关重要的设备之一,其运行的可靠性直接关系到电网连续可靠供电。差动保护是变电站主变保护的主保护之一,主要承担着保障变压器安全、可靠运行的责任。2011年6月28日,恒山变的2号主变空载合闸时,引起1号主变差动保护动作,造成恒山变10 kV母线短时失电。本文通过对恒山变1号、2号主变操作过程、保护动作情况、保护定值及故障录波信息进行综合分析,结合和应涌流的特点,指出和应涌流是
期刊
随着乡村振兴战略的实施,乡村建设日益受到重视,而传统村落则是形成年代较久远,拥有丰富的自然资源和深厚的文化遗产,值得重视和保护的村落。传统村落是乡村文脉的一个重要聚集地,具有地方特色、人文风情、乡土情怀,现有的景观空间环境充分反映了其独特的景观要素和具有地方特色的历史人文景观内涵。然而,传统村落的文化传承却没有得到足够的重视。本文以“文脉”为切入点,对邢台西部地区传统村落景观空间进行了研究。研究文
学位
随着铁路站点井喷式发展建设,铁路站前空间的景观品质关乎到旅客对于城市的第一印象;同时是当地政府部门响应国家政策,高度重视铁路事业的重要体现。站前空间一方面属于城市铁路枢纽的重要组成部分;另一方面它同时兼具重要的集散功能与景观效应,是展现城市形象与独特地域文化的“城市会客厅”。现阶段站前景观面临的问题:实践方面,在政策指引下广于建设,站前景观营建缺少地域特色和鲜明主题,导致设计趋同化的问题;站房周边
学位
药物-靶标相互作用是新药研发与药物重定位的基础。传统的实验技术因其高昂的时间和金钱成本,已经难以满足日益增长的药物研发需要。在信息时代,随着大数据与人工智能的发展,计算机辅助药物设计越来越受药物研发人员所关注,药物-靶标相互作用的预测与分析是计算机技术在药物设计中的重要应用,它涵盖了基因组学、高通量筛选、分子动力学模拟、复杂网络、矩阵分解、机器学习等多学科多领域的内容,大力推动着新药研发与药物重定
学位
随着智慧城市的建设和发展,监控摄像机被广泛安装和应用,由此产生的视频数据量呈现爆炸式的增长。如何高效地利用监控视频大数据是当前的研究热点,也是亟待解决的技术难点。因此,以简短表达监控视频为目的的视频浓缩技术得到了人们的广泛关注。视频浓缩技术是将原视频中的目标进行提取和分析,采用以空间换时间的方式,消除视频中的冗余信息,但现有的视频浓缩方法存在交互性保留不精准,复杂场景下视频浓缩性能不佳以及浓缩过程
学位