求解非凸最小化问题的谱尺度MBFGS方法

来源 :湖南大学 | 被引量 : 0次 | 上传用户:likang281116
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
拟牛顿法是求解中小型无约束优化问题颇受欢迎的一类方法,该方法具有计算量较小,收敛速度快等优点.在众多的拟Newton法中,BFGS算法由于具有很好的数值效果,是最受欢迎的一种算法.但该算法用于求解非凸函数极小值问题时不具有全局收敛性.MBFGS算法可用于求解非凸函数极小值问题.然而求解大规模问题时,MBFGS算法产生的迭代矩阵Bk通常是稠密的,Bk的条件数可能较大,因而求解子问题较难.针对MBFGS算法这种缺陷,本文提出一种谱尺度MBFGS算法.其基本思想是对传统的拟Newton方程进行修正,使得拟Newton矩阵不再是目标函数的Hessian矩阵的近似,而是它的经过预处理后的形式的近似.这种方式的目的在于降低迭代矩阵的条件数,从而降低求解子问题的难度.该算法产生的迭代矩阵具有很好的性质,迭代矩阵具有对称正定性,该性质与函数的凸性和线性搜索无关;具有自修正迹的性质,可以有效的纠正过大的特征值.从而使得迭代矩阵的条件数变小.   在较弱的条件下,我们证明,即使用于求解非凸函数极小值问题,采用Wolfe-Powell或Armijo线性搜索的谱尺度MBFGS算法也具有全局收敛性和R-线性收敛性.此外,我们还引入Grippo的非单调线性搜索,研究相应的非单调谱尺度MBFGS算法,并进行数值试验.结果表明,本文算法对求解规模较大的问题时,也具有较好的数值结果.
其他文献
分配格是一种特殊的偏序集,也是一种具有两个二元运算且满足幂等性、交换律、结合律、吸收律和分配律的代数系统.而群是具有封闭性、满足结合律、具有单位元和逆元的数学结构
社会性动物的群体活动往往能产生惊人的自组织行为,如个体行为显得盲目的蚂蚁在组成蚁群后能够发现从蚁巢到食物源的最短路径。受其启发,意大利学者M.Dorigo等人在1991年通过
神经元在中枢神经系统信息处理过程中起着关键的作用,神经元信息的产生和传输体现了丰富的非线性特征.因此,单个神经元与多个神经元耦合系统的非线性动力学研究具有重要意义。
学位
本文借助虚拟仪器LABVIEW平台,对光电三极管的伏安特性进行了模拟仿真实现.首先,文章在理论上给出了光电三极管伏安特性公式,然后,文章就如何在虚拟平台LABVIEW下,对光电三级
初中生数学自我监控能力对数学学业成绩有显著影响,数学学习策略是作为衡量学业成绩的重要指标.研究表明数学自我监控能力通过数学学习策略这一中介变量对数学学业成绩产生影
二阶系统通常是指用二阶微分方程所描述的系统。在控制系统等应用领域中二阶系统的存在尤为广泛。在一定的条件下,许多高阶系统往往都可以转化为二阶系统来研究。因此,对于二阶
在当今社会,人们身边充斥着大量的数据,特别是文本数据,使人目不暇接。面对如此海量数据,我们已经不能简单地凭借人工处理来得到信息,迫切需要计算机来帮助我们更好地发现和
在本文中,基于前人的一些研究成果,计算线能函数关于对称张量的微分,并用其证明有界严格凸集上第一特征函数和热方程正解的对数凹性估计.  
本文主要研宄了Zp空间上的函数导数的平均增长以及Bloch型空间和Bers型空间到Zp空间的一个积分型算子Cnφ,g的有界性和紧性.主要包含以下几个部分:  第一章,主要介绍了空间的
最优化方法是运筹学的一个重要组成部分,在自然科学、社会科学、生产实践、工程设计和现代化管理中具有广泛的应用。近年来,随着计算机的飞速发展以及实际问题的需要,大规模优化
学位