【摘 要】
:
作为承载信息的重要载体之一,图像在国家重点需求和人类的日常生活中都有着重要的作用。但是由于光照条件、拍摄设备等因素的影响,采集到的低照度图像无法高效传递信息。这些图像往往伴随着对比度低、颜色失真、噪声影响和细节缺失等一系列问题,不但会影响人类的视觉感知,而且限制了基于计算机视觉等的后续处理和应用。因此,开展有关低照度增强算法的研究具有重大的理论意义和应用价值。近年来,基于深度学习的低照度图像增强算
【机 构】
:
中国科学院大学(中国科学院西安光学精密机械研究所)
【出 处】
:
中国科学院大学(中国科学院西安光学精密机械研究所)
论文部分内容阅读
作为承载信息的重要载体之一,图像在国家重点需求和人类的日常生活中都有着重要的作用。但是由于光照条件、拍摄设备等因素的影响,采集到的低照度图像无法高效传递信息。这些图像往往伴随着对比度低、颜色失真、噪声影响和细节缺失等一系列问题,不但会影响人类的视觉感知,而且限制了基于计算机视觉等的后续处理和应用。因此,开展有关低照度增强算法的研究具有重大的理论意义和应用价值。近年来,基于深度学习的低照度图像增强算法取得了大量进展,但是仍然存在问题与挑战。一方面,目前的大多数算法没有考虑或有效处理真实的低照度图像中存在的噪声问题。另一方面,由于合成数据和真实数据的分布差异,针对真实图像的泛化性能有待提升。针对上述问题,论文以低照度图像为研究对象,利用深度学习对低照度图像增强中面临的问题进行研究,主要工作如下:1)设计一种基于注意力-多分支网络的低照度增强算法。在低照度环境下获取的图像具有低可见度,且由于多种因素的影响,场景中的光照强度会随着空间区域而变化。同时,低照度区域也存在不同程度的噪声干扰。基于此,设计了一种基于注意力-多分支网络的低照度图像增强算法。该算法基于Retinex理论,首先将输入的低照度图像分解为反射分量和照明分量,然后在两个子网络反射复原模块和照明调整模块中分别对反射分量和照明分量进行调整,将调整后的分量对应相乘获得最终的增强图像。在反射复原模块中加入一个轻量有效的注意力块,通过引入原始图像的照明信息给反射分量不同区域赋予不同的注意力权重,使得该模块的骨干网能够更有效地对反射分量进行复原和噪声抑制。另外,采用轻量级的卷积神经网络对照明分量进行调整。最后在不同的低照度图像数据集上进行了实验,并和其他算法进行了对比,从定量和定性两方面验证了该算法的有效性。2)提出一种基于半监督学习的低照度图像增强算法。目前基于深度学习的低照度图像增强算法虽然已经取得了出色的性能,但是在训练过程中,大多数算法仍然需要大量成对的图像进行训练。由于获取大量的真实低照度/正常图像存在难度和成本问题,但使用合成图像则倾向于让网络学习特定模式,使得在真实的测试数据上并不具有较好的泛化能力。因此,提出基于半监督学习的低照度图像增强算法,将合成的低照度/正常图像对和真实图像共同馈入网络学习。首先将合成数据对输入网络进行训练,并使用高斯过程对合成数据在潜在空间进行建模。然后将真实数据送入网络,通过利用先前在合成数据训练阶段建模的高斯过程为真实数据生成伪标签,用于真实数据的网络训练。该算法分别在合成数据集和五个广泛应用的真实数据集上进行测试,同时和其他增强算法进行了实验对比,实验结果验证了提出算法的性能。
其他文献
空间激光通信技术能够有效实现空间高码率和安全通信,目前,美国、欧洲、日本和中国等国家已经采用不同探测体制成功实现了在轨卫星激光通信试验。在星间光通信的整个过程中,捕获过程是关系通信的建立与恢复的关键技术。本文研究了指向误差对光通信链路建立过程中对捕获过程的影响。首先编写了星敏感器上位机软件,利用星敏感器获取卫星姿态,并对星间光通信的建立过程进行分析,建立起初始指向模型,其次,建立中继光路支路的误差
在高功率激光系统中,激光波前参数是用于系统特性评价的重要指标,随着我国惯性约束聚变(ICF)高能激光装置的规模越来越大,装置对运行的单发次激光波前的测量及精密调控要求越来越高,因此对瞬态波前高精度测量提出了迫切需求。然而,传统相移干涉测量技术需要多幅相移的干涉图,达不到瞬态测量的要求;基于空间载频的傅里叶变换无法实现采样间隔的自定义,对宽带光场的信息提取精度差。为了实现宽带瞬态激光波前的相位恢复,
视线估计技术是一种新兴智能人机视觉交互方式,是通过构建眼部图像中眼动特征和注视点之间的模型,来解算人眼注视方向或注视点位置的技术。本文在分析头戴式系统集成化结构特性下,重点研究两部分内容,包括近红外光照明下瞳孔特征提取算法和建立基于此特征的视线估计模型。本文主要工作和研究成果如下:(1)本文阐述了视线估计技术的国内外研究现状及趋势,依据头戴式系统特性引出了课题研究背景与意义,具体分析了眼动特征定位
测量是利用某种工具实现对目标的客观认识,随着科技的进步,高精度微位移的测量变得至关重要,对测量仪器的要求也越来越高。电涡流位移传感器是能够进行非接触、高精度测量的一种测量仪器,其主要是利用电磁的互感效应进行工作的,能够适应复杂的测量环境,抗干扰能力强,目前对电涡流传感器的研究主要是单频位移量测量的性能改善和多频探伤的信号处理,该论文主要是对双频激励的电涡流位移传感器进行研究,通过对双频的解耦运算剔
生物柴油作为21世纪最有前景的代用燃料,可以以任意比例和柴油混合使用,使用时无需改变柴油机结构,生物柴油自含氧,可以有效降低颗粒物排放,燃用生物柴油来降低颗粒物排放已经被证明是一种切实可行的方法。然而,燃用生物柴油在降低颗粒物排放的同时,也会使颗粒物粒径分布和碳质组分发生改变。本文采用一台满足国V排放标准的某型号四缸电控高压共轨柴油机,在选定工况下,进行燃用柴油和三种不同原料生物柴油(大豆油、棕榈
声源识别在噪声控制工程,声学故障诊断等方面都有重要应用。目前基于传声器阵列测量的声源识别方法主要包括波束形成和近场声全息,这两种方法都需要声信号相位作为信息基础来识别声源。工程中还存在声源辐射白噪声的情况,这种情况下各测量点处的声信号并不相干,无法使用以相位信息为核心的的声源识别方法来识别声源。本文提出利用各测量点处的有效值信息进行内积运算来识别球面波声源的方法,其基本原理是用传声器阵列测得声压信
深空探测已经成为世界科技强国追逐的热点。中国计划在未来实现载人登月,载人月球车将辅助宇航员在月球表面行驶并完成探测、考察、收集和分析样品等复杂任务。月球表面环境复杂,将平视显示器(HUD)应用于载人月球车可以给宇航员带来较大的便利。月球车载平视显示器可将月球车仪表盘信息、导航、预警信息等投影在宇航员前方对应位置,融合显示于月球表面真实视景,来增加宇航员对周围环境的感知和理解。本文针对月球车载平视显
随着成像技术的发展及广泛应用,彩色图像成为各项科研探测活动中信息的一种重要载体及重要探测技术手段,彩色图像处理研究凸显出了及其重要的应用价值。覆盖了彩色滤波阵列的彩色相机是最为常见实用的一种成像手段,其数据量和灰度图一样多,在经过插值还原后可以重现彩色信息,是目前彩色相机广泛采用的一种方式。本文对彩色滤波阵列彩色相机进行相关技术研究。从应用场景分析出发,由于彩色成像相机光学镜头,滤光片参数,传感器
激光熔覆技术利用高能激光将粉末材熔覆在基体表面,形成具有特殊性能的冶金结合层,以此来改善金属零部件的表面性能。激光熔覆过程是一个复杂的物理化学反应过程,其中熔池是其最小的成形单元,熔池由高能激光束、金属粉末和基体相互作用而产生,熔池的质量直接决定了整个熔覆层的质量好坏,而熔池凝固后的裂纹数量、致密性及粗糙度等都与熔池的温度有着直接的关联。目前国内外有一些学者对熔池温度与激光熔覆质量之间的影响关系进
天基红外系统避免了地球大气对红外谱段的吸收、水汽环境对低温光学系统的影响和较短观测时段这些地基观测的缺点。本文提供了一种低成本,小型化的天基红外光学系统方案,可以实现高信噪比探测,通过获取实时的光度变化,推演红巨星时期的恒星结构变化,了解恒星的演化过程,本文的主要任务:1)验证低温红外光学系统自身背景辐射模型,对系统自身背景辐射进行定量的计算;2)验证低温红外光学系统在微小卫星平台的实现可能性,验