基于深度学习的数模混合编码技术研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:wdasheng
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
自从信息技术和互联网的出现,许多的视频以及图像信息信号不断发展,例如移动端手机网络视频,视频监控等。各类的多媒体数据大量增长,人类已然进入了大数据时代。其中增长速度最快的当属图像视频数据。因此,研究如何有效并且高效的处理视频图像数据是大数据处理的一个核心问题。故此,研究图像视频编码以及无线视频软播具有重大的意义。在传统的视频图像编码中,转换与量化是其关键技术。然后变换和量化造成了编解码中的不可逆损失,是一种有损编码。而且在无线传输的系统中,由于无线信道的存在,使这种有损编码的缺点进一步放大。悬崖效应就是其中的一种。由于传统的数字编码需要对不同带宽的用户分别进行针对性编码以及传输,如果在传输过程中受到了噪声的影响,将会导致了不能够解码。当用户的带宽高于预计带宽时,由于不能够接收到更多的信号,图像或视频的重建质量也不能得到提升。总体来说会造成用户带宽的浪费或者不佳的观看体验。软播是被提出来解决悬崖效应的。软播是一种数模混合无线传输模型,它用连续实数代替离散码流来表示视觉信号;该模型避免了熵编码、量化编码等非线性运算,整个系统采用线性计算,使得接收的图像质量随信道信噪比线性变化。同样的我们也在针对数模混合传输模型中的问题进行了研究,主要工作包括以下三个方面:第一,我们研究了无线视频软播中重建图像质量与信噪比保持线性关系的原理,确定,只要我们保持整个编解码系统输入与输出的连续性,就能够保持着这种解码端的重构图像与信道条件连续变化的特性。在此基础上,我们提出了基于非线性变换的数模混合传输模型,利用非线性函数对信源频域的数据进行变换,进一步的推导出传输时最优的能量分配系数与解码端相应的噪声估计系数。通过实验验证我们提出的方法确实能够取得更好的传输性能,并且取特殊函数的时候,原始的软播方案是我们非线性数模混合传输方案的一个特例。第二,一般图像视频编码过程中太过重视重建图像与原始图像的均方差失真,主要保持对位像素值的尽可能接近,而忽略了图像的边缘细节等高频信息。于是有人提出了视觉友好型的数模混合传输模型。这是一种基于梯度的数模混合传输模型,利用变换域的低频信息构建出基本图形,然后利用梯度信息进一步补充细节。这样得到的结果在主观感受上具有很大的优势。即在客观评价指标相近的情况下,能够得到更好的人眼识别体验。我们利用非线性函数对增强层的梯度信息进行处理,然后再通过信道进行传输。实验表明,经过非线性变换处理的梯度信息,能够更好的帮助基本层重构梯度信息。在重构图像中能够更好的体现出图像的边缘信息,人眼能够获得更好的视觉体验,即视觉友好型数模混合传输模型。第三,由于神经网络的快速发展,基于神经网络的编解码器也越来越多,应用越来越广泛。在数模混合传输过程中,使用神经网络也逐渐变得普遍。本征图的分解是把图像分解成相互独立的两种特征,然后更好的应用于分类识别等任务。我们把本征分解和神经网络编解码器结合起来,提出了基于本征分解的带宽自适应信源信道联合编码方案。我们把图像分解成表示图像物体固有特征的本征图和表示图像环境条件的亮度图。这两种特征分别进行编码以及传输。相对于直接处理,本征分解的结果能够更好的对抗信道的噪声,能够得到更好的重构图像。我们的实验结果也证明了这一点。
其他文献
气凝胶基纳米多孔材料因其高孔隙率、高比表面积、低密度和低导热系数在热能管理和降低世界总能耗方面而被认为是理想的候选材料之一。其中,生物基气凝胶,特别是来源最广泛的天然高分子纤维素基气凝胶,因其可再生、可生物降解性、高表面积、可调长径比、低热膨胀系数和可调表面化学特性而备受关注,近年来被广泛研究和报道。然而,纳米纤维素基气凝胶的力学性能差(<1 MPa)、生产成本高(特别是干燥成本)、加工步骤复杂且
学位
D公司大亚湾两台百万千瓦级核电机组,1994年投入商业运行,核岛厂房内安全级直流及不间断电源系统设备均在电站建设初期投入使用,到目前为止已运行接近30年,需要进行整体更新改造(下面简称K项目)。改造项目将会面临各种各样的问题,将FMEA工具应用K项目中,可以提升工作效率,提升项目质量。本文将研究K项目在执行过程中可能遇到的问题,如D公司将对这两台机组进行数字控制系统(DCS)改进,会增加电源系统容
学位
有机发光二极管(Organic light-emitting diodes,OLEDs)作为新一代显示和照明技术,已展现出极大的应用前景,而目前制约OLEDs显示技术发展最关键的因素之一是缺乏综合性能优异的蓝光材料。本文以蓝光材料载流子注入/迁移的问题为着眼点,通过合理的分子结构设计实现了具有高且平衡载流子迁移率的蓝光分子和高效率低滚降的蓝光OLED。具体研究内容如下:1.基于咔唑衍生物和三苯胺为
学位
代建制在我国推广了近17年,在政府投资项目上得到广泛应用,一定程度上保证了工程建设目标,降低了工程建设职务犯罪率。在项目代建管理模式下,非专业的委托人通过委托代建人对项目进行科学的专业化的管理。经过多年的工程建设市场培育,市场上有大量具备项目代建管理能力的专业的企业,部分国有企业已在推行项目代建制。在项目代建实践中发现,项目代建存在各种各样的风险,稍有不慎会导致项目的失败。本文在现有学者对项目代建
学位
随着软件行业的飞速发展,尤其是近几年人工智能对各行各业的赋能场景越来越多,使得AI类的软件开发需求呈现井喷态势。此类软件高度场景化、定制化的特征,决定了其项目管理过程尤其是需求管理过程的重要性、复杂性、多变性。再加上现有的几种主流软件开发模型,如瀑布模型和敏捷模型,都是在这波人工智能兴起之前提出的,在管理AI类软件项目需求过程中显得有些力不从心。那么,对此类软件项目需求管理研究,就具备了一定的现实
学位
航天重大专项项目进度管理是项目实施的关键环节,项目进度管理科学性与合理性是项目研制成败的重大因素。随着国家对航天工业重视,航天研制型号任务和重大专项数量不断增多,项目进度管理也逐渐引起更多关注。项目进度管理方法和管理理念暴露出的不足成为制约项目实施的障碍,研究如何将先进的管理技术和航天项目组织独特性结合起来,以达到低成本、高质量、短工期的项目研制具有重要的实践和理论意义。本文基于航天工程项目管理现
学位
现代化社会推动了电子设备以及无线设备的飞速发展,随之而来的电磁辐射问题也亟待解决,因此人们采用电磁屏蔽材料来防止电磁波的危害。由于具有实际应用所需要的柔韧性、耐腐蚀性、耐候性及密封性,导电硅橡胶复合材料在众多电磁屏蔽材料中脱颖而出。对于导电复合材料而言,其导电性和电磁屏蔽性能依赖于导电填料在基体中的分散性及连通性,但用传统的共混方式构建复合材料往往会产生填料易聚集、难分散、不连通、用量大及复合材料
学位
芳纶纳米纤维(ANFs)作为一种新型纳米材料,不仅具有芳纶纤维优异的强度、模量等性能,还具有比表面积大、高长径比等优点,同时ANFs有更多的极性基团暴露在表面,反应活性增大,能够通过有效应力传递改善聚合物性能。基于此,ANFs有望赋予橡胶优异的性能。ANFs/橡胶复合材料常用的制备工艺是乳液共混法,但该工艺难以工业化,限制了ANFs在橡胶中的应用。本研究首先制备ANFs-胶乳预分散体,然后直接与生
学位
随着经济不断发展,汽车用量逐年增加,空气污染不断严峻。节能减排法规日益严格,汽车厂商为了降低排放量,引进了新的技术。在变速箱控制方面主要是利用电子油泵来替代机械油泵,这样可以减少污染并且提升燃油效率。汽车方面的电控技术一开始主要是欧美发达国家在研发,为了降低成本,提升国产化,国内的汽车电子配套企业也在蓬勃发展,不断研发出性能更优,成本更低的配套产品。本文研发的汽车启停系统油泵电机控制器正是在这一背
学位
本文建立了基于遗传规划(Genetic programming algorithm,GP)的扩展型精馏-膜分离集成求解策略,可以针对工业各类共沸物系的特点及分离要求,在匹配适宜的膜分离类型及膜材料基础上,自动求解最优的精馏-膜分离集成流程及其参数,并进行了综合策略的应用研究。基于GP扩展型精馏-膜分离集成求解策略包括:扩展型化工节点定义、化工专业型种群生成、个体适应度计算、进化操作和算法终止准则定
学位