求解稀疏子空间聚类问题的块坐标下降算法研究

来源 :河南大学 | 被引量 : 0次 | 上传用户:game780
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
块坐标下降法(BCD)循环使用不同的块坐标方向求解问题的最优解.由于此类算法具有迭代成本低、内存需求小、易于并行化等特点,在大规模数值优化中得到了广泛应用.给定一组来自多个子空间的数据,子空间聚类的目的是将这组数据分割到各自的子空间中,并同时清除可能存在的噪声.子空间聚类算法是实现高维数据集聚类的有效方法,最新研究表明聚类任务可以刻画为带有块对角正则项的非光滑非凸优化问题.本文研究求解稀疏子空间聚类问题的BCD算法,分析算法的收敛性,测试算法的数值有效性,并与著名算法做效率比较.第一章,首先,给出本文所需的优化知识,介绍临近块坐标下降法(PBCD),对称GaussSeidel技术以及交替方向乘子法(ADMM).然后,简单介绍子空间聚类问题的部分优化模型,并给出关于此问题的部分研究成果.最后,简单陈述本文的主要贡献,同时给出本文所用的符号.第二章,使用PBCD来提高块对角正则化算法(BDR)的效率,使用对称Gauss-Seidel技术使每个子问题易于求解,并在一定的条件下分析PBCD算法的收敛性.最后采用Nesterov的加速技术(命名为APBCD1),并给出其迭代复杂度.尽管如此,被求解的问题仅是惩罚模型,而非原问题本身.第三章,提出直接求解原模型的两种算法:第一种算法是PBCD方法的变形,第二种算法是求解等价问题的耦合交替方向乘子法(C-ADMM).此外,对于所提出的PBCD算法,采用Nesterov的加速技术(命名为APBCD2)进一步提高其数值效率.第四章,使用Hopkins 155真实数据集对算法进行数值实验,并与BDR的性能进行效率比较.结果表明ABCGD1算法比BDR算法大约快1.7倍,ABCGD2算法比C-ADMM大约快2倍.第五章,总结全文,并指出文章中存在的值得进一步探讨的问题.
其他文献
随着信息技术发展,互联网已经成为了我们日常生活中不可或缺的一部分,但是,网络在带给我们便利的同时,也产生了信息超载问题。为了缓解信息超载的负面影响,研究者们提出了个
在实验室或企业等组织的运转过程中,设备是非常重要的物质资源,它直接影响着实验室的科研成本、科研效率以及科研成果质量,因此实验室或企业的设备管理水平与其未来发展息息
综合监视系统(ISS)包含地形感知与告警系统(TAWS)、空中交通防撞系统(TCAS)和机载气象雷达(WXR),是飞机通信、导航和监视航空电子系统(CNS)的重要组成部分,提供飞机周围的地形、空中交通状况和气象等信息,增强飞行员对周围环境的感知能力,保障飞行安全。本文主要对综合模块化航空电子(IMA)架构下的综合监视系统仿真器设计进行研究,对比传统的联合式综合监视系统结构,设计了综合模块化航空电子
随着信息化技术与人类社会的不断结合,人类与软件之间也越来越密不可分。而自从软件问世以来,其质量问题一直是困扰人们的一大难题,每年因为软件质量造成的损失更是数以亿万
在房地产多元化发展的今日,随着国家近些年对于楼市的政策性调整,房地产企业面临着政策和同业竞争的双重压力。所以在当前背景下,中国的房地产营销模式也在逐渐发生了改变,已
高光谱图像分类是遥感图像处理领域中的热门研究问题,然而大量高光谱图像的标记样本获取困难,人工标记成本较大,限制了分类性能的提升。针对以上问题,本文基于主动学习和卷积
当两种不同密度流体的分界面受到激波作用时,界面上的初始小扰动会随着时间不断增长,并最终形成成湍流混合,这种典型的界面失稳现象被称为Richtmyer-Meshkov(RM)不稳定性。RM
习近平总书记强调,必须增强政治意识,善于从政治上看问题,善于把握政治大局,不断提高政治判断力、政治领悟力、政治执行力。广大党员干部要锤炼政治品格,不断提高"政治三力",
传统的视觉SLAM(Simultaneous localization and mapping)系统大多数只适用于小范围、静态的环境中,近年来,一些研究者也逐渐将研究方向投入到将SLAM系统与语义分割系统结合
X射线断层成像(X-ray computed tomography,XCT)技术,因其能无损地重建被测物体内部结构的能力,被广泛地应用于医学诊断、工业检测和材料分析等领域.在实践中,由于实验设备、测