快照压缩成像系统与深度学习重构方法研究

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:jiaonimaqubao110
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
多维成像是一种能够感知和测量超越空间二维空间图像的多维度信息的图像采集技术。三维空间、一维时间以及光谱、相位和偏振等光波物理量维度蕴含着人眼无法完全感知的海量信息,这些信息不仅在遥感、医疗和食品安全等领域有着广泛应用,还在计算机视觉和模式识别领域中扮演重要角色,这使得多维成像技术成为实现未来万物互联的智能化社会的关键技术。受到传统成像原理与传感器硬件限制,多维成像系统通常采用多相机或机械扫描的采集方式,存在速度慢、系统复杂度与成本高等问题。得益于计算成像与压缩感知理论的发展,基于硬件编码软件解码的快照压缩成像(SnapshotCompressiveImaging,SCI)技术被提出,仅采集二维观测获取场景多维信息,极大地提高了采集速度,降低了系统复杂度。然而,对于作为SCI系统关键部分的图像重构任务,传统优化算法存在重构速度慢和重构质量差的问题,严重限制了SCI技术的应用。为克服以上问题与挑战,本论文以压缩感知与深度学习为基础,在SCI系统应用与高速、高质量图像重构方法两个方面进行了深入研究,具体研究内容与创新成果如下:1.提出了快照压缩多光谱显微内窥成像系统,将光纤束成像、SCI系统和深度学习算法相结合,实现以视频帧率采集和重构具有细胞级分辨率、包含24个光谱频带的多光谱内窥图像,有利于形成可实用化的快速、低成本医疗内窥诊断工具。此外,搭建了基于单色散的快照压缩光谱成像和基于数字微镜的压缩时间成像系统,前者可采集450-650nm范围内28个光谱频带图像,后者可实现使用低成本相机以10-30倍帧率采集动态场景,为算法研究提供可靠数据集。2.围绕深度学习图像重构,论文在网络设计、可解释性、灵活性和泛化性等方面进行了创新性研究,提出了多种基于深度学习的SCI图像重构方法,相比于现有的重构方法,在重构质量和速度上分别可达到国际先进水平。1)为解决传统优化算法在SCI系统图像重构上速度慢、效果差的问题,提出了三种端到端神经网络结构。在光谱成像重构上,首先提出了多维自注意力机制,在二维空间和一维光谱上分别建立注意力映射学习光谱图像特有的空间和光谱的相关性,解决了原始基于像素的自注意力机制计算冗余度高的问题。其次,运用循环瓶颈层和多尺度残差卷积增强特征提取和特征通道关系模拟能力。在时间成像上,提出了基于残差网络的深度神经网络结构,提高网络收敛能力。所提出的端到端的神经网络对实验数据可实现百毫秒量级的重构,从而可构建端到端实时采集和重构的闭环系统,促进SCI系统的产业化应用。2)为解决端到端神经网络可解释性差、灵活度低的问题,通过结合优化算法与深度学习,提出了深度展开式神经网络架构,将多个卷积神经网络集成到一个展开的优化迭代过程中,形成级联网络,并进行端到端训练。该方法可通用于在快照压缩光谱和时间成像系统中,并对调制码型不敏感,灵活性高,在图像重构质量与速度上均达到国际先进水平。3)为解决监督学习因数据集短缺造成的泛化性差的问题,针对光谱成像,提出了一种自监督神经网络框架,通过非训练神经网络直接从压缩观测中学习光谱图像的先验特征,并与即插即用式算法框架相结合,实现无需训练数据的高质量光谱图像重构。该方法在缺少多维图像数据集的SCI应用中具有潜在优势。
其他文献
学位
本论文制备了CdS敏化TiO2复合电极,并研究了复合电极的光电化学性能。首先采用“手术刀法”制备了TiO2纳晶薄膜电极,并通过连续离子吸附反应技术将CdS沉积在TiO2电极表面形成CdS/TiO2复合薄膜电极。通过对CdS/TiO2复合薄膜电极的光学吸收性能研究表明,改变CdS的沉积次数可有效控制TiO2电极表面CdS的沉积量。SEM及XRD研究结果表明,在实验条件下,无论是否进行加热后处理CdS
本文采用固相法合成了负极材料LiO,采用X射线衍射、扫描电子显微镜、循环伏安、电化学阻抗和恒流充放电研究了其性能,并在此基础上采用活性炭、二氧化锡、三氧化二锑和三氧化二铋对LiTiO进行了掺杂改性研究。实验表明:采用湿法混合的样品性能更佳,在Li/LiTiO体系下首次放电容量达163.1mAh·g,60次的循环之后容量衰减仅为4.4%;在LiCoO/LiO体系下,首次放电比容量为122.2mAh·
负载型蒙脱石催化剂具有层间距可调控、比表面积大、制备工艺简单、原料来源广泛、价格低廉、绿色环保、且催化活性、重复利用率高等特点,近年来引起了越来越多研究者的关注。本文对固体酸催化剂、蒙脱石固体酸催化剂的研究进展和蒙脱石的基本结构、性能及其应用作了系统的文献综述。利用蒙脱石层间阳离子的可交换性,在酸性介质中将铈盐负载在蒙脱石上,制得蒙脱石负载硫酸铈固体酸催化剂;以催化合成二芳基乙烷的烷基化反应作为催
根据现有研究资料,结合食育课程教学的经验,阐述了食育课程设置的必要性,以及课程的基本形式和实施策略,认为食育课程具有生活体验、道德教育和能力培养等作用,在课程形式上采用种植参与、食材加工等形式进行,在实施过程中强调家校共育。
室内可见光定位是指利用发光二极管(LightingEmittingDiode,LED)固态光源在照明的同时提供定位功能的新型定位技术,具有节能降耗、应用广泛、绿色健康、成本低廉等优点。室内可见光定位具有室内传统无线定位方法难以替代的优势,在室内定位领域具有较好的发展和应用前景,成为近年来该领域的研究热点。基于可见光的室内定位技术和其它无线定位技术相比较,容易达到更高
专业学位硕士论文SPECIALIZEDMASTER’SDISSERTATION西北大学学位评定委员会二○二一年六月分类号:C939学校代码:10697密级:公开学号:201842671多元主体协同参与拆迁安置小区治理研究——以湖州市八里店镇为例学科名称:公共管理专业学位类别:公?
学位
音乐欣赏课是小学音乐课堂教学中的重要组成部分,是培养学生音乐鉴赏力最有效的途径。在小学阶段,学习音乐最重要的并不是大力发展技能,而是注重一种内心的体验,一种音乐审美愉悦的体验。很多时候音乐只能意会,不可言传,如果光靠老师讲解,并不能挖掘出学生自身的感受,因此一定要通过学生亲身参与到音乐活动之中,自己主动地去探寻、领悟,对音乐才能真正理解,才能获得审美的体验。学生在小
随着城市化进程的不断演进和科技的持续变革,中国居民的健康问题尤其是城市的公共健康问题越来越复杂。慢性疾病的盛行不仅是环境污染导致的,还有很大程度上是因为科技的便利性使得居民在日常生活中过于缺乏身体活动。全民健身背景下,如何通过规划设计推动全民健身计划的实施为城市规划领域解决公共健康问题提供了思考方向。基于此,本论文讨论使用者的需求,努力为居民营造一个健康的生活环境,
目的探讨尿激酶联合低相对分子质量肝素(LMWH)对急性肺栓塞儿童凝血系统及治疗疗效的影响。方法选取我院近三年(2018年3月-2021年3月)收治的急性肺栓塞儿童80例为研究对象,随机分为对照组(n=40)和观察组(n=40)。其中对照组使用低相对分子质量肝素治疗,观察组在使用低相对分子质量肝素抗凝后6h后加用尿激酶治疗,两组均治疗一周,观察两组患者治疗效果和凝血指