矩阵补全的模型、算法和应用研究

来源 :上海交通大学 | 被引量 : 11次 | 上传用户:znaddh
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
当矩阵的元素有未知或缺失的情况下,矩阵补全(Matrix Completion,简记为: MC)就是根据己知元素估计未知元素,从而把矩阵恢复完整的过程.目前矩阵补全己广泛应用于机器学习,工程控制,图像和视频处理.一般情况下,如果不对矩阵的特性做任何假设,则矩阵缺失的元素可以取任何值,矩阵补全在理论上是不可能唯一实现的.但是如果对矩阵的特性做一些假设,例如低秩,则矩阵补全的解就是唯一的.本文主要研究矩阵补全的一些模型,算法和应用.全文共分六章.首先在第一章,我们简要介绍矩阵补全的模型,一些经典算法,研究背景,意义和现状,并概述了本文的主要工作.第二章,在线性规划的系数矩阵存在信息缺失且己知元素不精确的情况下,我们给出了一个新的基于矩阵补全的鲁棒线性优化模型和算法.线性规划目前己广泛应用于投入产出分析中,用于分析经济和环境科学中行业之间的相互依存关系.在这些应用中,系数矩阵的一些元素无法测量到,即使能测量到也会存在取样误差.因为系数矩阵在一般情况下是低秩的,所以我们可以用核范数来描述不确定性集合,得到线性规划问题的鲁棒模型.基于交替乘子法,我们设计了一种快速求解算法.在一些随机例子和合成例子上的数值实验结果表明我们的模型和算法是很有效的.第三章,我们给出了矩阵补全的三种新的非凸模型和相应的算法,它们是为信息缺失条件下的高维协方差矩阵估计设计的.协方差矩阵在风险管理,资产定价,资本配置等应用领域发挥着重要的作用.在高维条件下,即在矩阵的维数趋近于或大于样本的数目时,协方差矩阵估计就变得非常困难了.一种广泛使用的降维方法是多因子模型.基于多因子模型的高维协方差矩阵估计方法具有很快的收敛速度,在一些应用中输出的协方差矩阵具有很高的精度.但是由于技术和花费方面的原因,因子矩阵中有大量的信息无法通过调查得到.在因子矩阵存在信息缺失条件下,基于多因子模型的高维协方差矩阵估计的协方差矩阵的质量就会衰退.因为因子矩阵往往是满秩的,目前己有的矩阵补全的方法不能直接应用到高维协方差矩阵估计中.本章我们给出了新的矩阵补全的非凸模型,并应用交替方向乘子法进行求解.数值实验表明,己有的基于核范数的凸的矩阵补全方法不能直接用来估计信息缺失条件下的高维协方差矩阵,而我们提出的非凸模型和算法可以给出非常令人满意的结果.第四章,我们给出了非负矩阵补全的两个模型和相应的算法.生命周期评价(LCA)和投入产出分析(IOA)是两种数据密集型(data-intensive)方法,这两种方法的可靠性和应用性非常依赖于数据的质量.但是由于技术和花费方面的原因,并不是所有的数据可以通过调查得到.但是,在生命周期评价中生产相似商品的过程往往具有相似的数据结构.而在投入产出分析中,历史调查年份的部门和目标年份的部门具有相似的投入结构.这些结论表明了生命周期评价和投入产出分析中的技术矩阵往往具有低秩或近似低秩的结构,这种结构促使我们应用低秩矩阵补全的技术来补全缺失的信息.如果我们忽略生命周期评价和投入产出分析中少量的副产品,技术矩阵应该是非负的.本章我们分别针对己知数据有噪声和无噪声的情况提出了一种非负矩阵补全的模型,它们都可以用交替方向乘子法进行求解.“Ecoinvent”数据库中存在大量的数据缺失,因此我们把提出的模型和算法应用到生命周期评价广泛使用的“Ecoinvent”数据库.数值结果显示新算法是非常有效的.第五章,我们针对第四章提出的带非负约束的核范数正则化最小二乘模型设计了另外三种快速算法.非负矩阵补全根据矩阵的一些己知元素寻找一个非负且低秩矩阵的过程.非负矩阵补全可以通过求解带非负约束的核范数正则化最小二乘模型进行.我们可以应用交替方向乘子法求解此模型.引入分离变量的方式不同,我们可以得到完全不同的算法.其中两种算法是基于交替方向乘子法的精确算法,每个子问题都可以精确求解.第三种算法也是基于交替方向乘子法,但其中一个子问题通过Forward-backward分裂方法近似求解,得到了一种非精确算法.我们在两类问题上测试新提出的三种算法,分别是随机矩阵补全例子和随机近似低秩例子.数值结果表明我们的算法都是非常有效的.第六章,总结了本文的主要工作,并提出了一些有待进一步研究的课题.
其他文献
目的:对三七生药生物转化后所提总皂苷进行药理研究,初步判断转化效果。方法:采用断头脑缺血、体内血栓形成、氯仿致心律失常及离体心脏灌流实验。结果:腹腔注射1号-5号样品1
负荷预测是电网规划的基础,也是技改大修等各类电力项目的依据。随着技术的发展,基于大范围区域的负荷预测方法可谓门类齐全、日臻成熟,但规模如区镇一级的负荷预测却难以达
在中国倡导的"一带一路"建设中,基础设施建设领域是优先领域,其中交通运输行业起到基础和支撑作用。缅甸是中国的重要邻国,在参与"一带一路"建设中具有不可替代的地位。"一带
陈祖芬的语言,永远充满着激情,她的文字却是非常理智.她的报告文学看上去并不太追求情节的连续和人物形象的完整,常常以独白式的自叙和旁白式的议论来表达观点和思想,比如<中
目的:通过观察输注经与未经60Co照射后的单倍体相合细胞治疗CB6F1小鼠肝癌(H22)模型中的GVHD临床表现及GVT效应,检测血清中Th1和Th2类细胞因子的变化,研究输注经照射单倍体相合
进入21世纪,人们的环境保护意识越来越强烈,美国、瑞典等国家纷纷出台了专门的环保税相关政策,而我国的现行税制中却缺乏一个相对独立,能起到统驭作用的新型环保税类,这也直接导致
随着网络信息技术的不断发展,催生了互联网金融的发展和完善。虽然其对传统金融机构形成了冲击,但不可否认的是,其促进了我国经济发展形式的多样化。然而,由于互联网金融是近
由于小学阶段的学生心智还不是很成熟,对于相对抽象的数学知识一时难以理解和接受,需要我们的老师在教学过程中要善于运用现代教学的理念,将生活化教学引入到日常的数学教学
自媒体新闻与网络热词在传播中体现出互生互利的共生性,其共生性缘于自媒体新闻和网络热词二者所具有的传播属性的相似性和传播功能的互补性。一方面,随着自媒体新闻的兴盛,
在航空、航天、交通、能源等安全关键领域中,软件的失效可能导致系统处于危险状态,从而导致财产损失、环境破坏甚至人员伤亡,如何保障这类软件的可靠性和安全性一直是学术界