Armijo搜索下求解无约束优化问题的扰动BFGS方法

Armijo搜索下求解无约束优化问题的扰动BFGS方法

论文摘要

经典BFGS方法是求解优化问题最有效的一种拟牛顿方法.牛顿法具有二次收敛速度和高精度,但每一次迭代需要计算目标函数的海色矩阵,计算量大.而拟牛顿法是牛顿法的一种近似,其迭代矩阵是海色矩阵的近似,满足著名的拟牛顿方程,无需计算问题的海色阵,减少了计算量,同时还具有局部的超线性收敛速度.当相邻两个迭代向量之差和对应的梯度向量之差的内积大于零时,BFGS迭代矩阵具有对称正定性质,其生成的拟牛顿方向是目标函数的下降方向,从而可采用Armi jo搜索和Wolfe搜索计算步长.文献[11]证明了 BFGS方法在Wolfe搜索下求解凸优化问题时具有全局收敛性质.但对于非凸优化问题,文献[13,26]中的结果表明BFGS方法在Wolfe搜索或精确搜索下求解非凸问题时可能发散,不具有全局收敛性.为了保证BFGS方法对非凸问题具有全局收敛,有必要对BFGS校正公式进行适当修正或对线性搜索进行改进.Liu在文献中[3]提出了另一种全局化策略,对经典BFGS迭代矩阵进行适当扰动,并证明了该扰动的BFGS方法在Wolfe搜索下对非凸问题全局收敛.但是,该扰动BFGS方法在Armijo搜索下求解非凸问题是否全局收敛,目前尚不清楚,这也是本文的主要研究问题.本文主要内容安排如下:第1章,我们介绍预备知识、问题研究背景及本文主要研究内容和创新点.第2章,我们讨论文献[3]中扰动BFGS方法在Armi jo线性搜索下的收敛性质.在适当条件下,我们证明了该扰动方法在Amijjo线性搜索下求解非凸问题时具有全局收敛性质.第3章,我们讨论该扰动BFGS方法在Armijo线性搜索下的局部收敛性质.在适当假设下,我们证明其具有超线性收敛性质.第4章,我们对提出的算法进行数值实验,验证算法的有效性.

论文目录

  • 摘要
  • Abstract
  • 第一章 绪论
  •   1.1 预备知识
  •   1.2 BFGS方法的研究背景及进展
  •   1.3 本文主要工作及创新点
  • 第二章 算法及其全局收敛性
  •   2.1 算法描述
  •   2.2 算法全局收敛性的证明
  • 第三章 算法的超线性收敛性
  •   3.1 局部超线性收敛性分析
  • 第四章 数值试验及结果分
  •   4.1 实验结果及分析
  • 结论
  • 参考文献
  • 致谢
  • 附录A (攻读学位期间发表论文目录)
  • 文章来源

    类型: 硕士论文

    作者: 严娇娇

    导师: 周伟军

    关键词: 非凸,扰动,方法,搜索,全局收敛,超线性收敛

    来源: 长沙理工大学

    年度: 2019

    分类: 基础科学

    专业: 数学

    单位: 长沙理工大学

    分类号: O224

    DOI: 10.26985/d.cnki.gcsjc.2019.000275

    总页数: 38

    文件大小: 1334K

    下载量: 35

    相关论文文献

    • [1].修正Armijo线搜索下共轭梯度法的收敛性[J]. 桂林电子科技大学学报 2013(05)
    • [2].Armijo线搜索下一个杂交共轭梯度法及其强收敛性[J]. 玉林师范学院学报 2013(02)
    • [3].Armijo型线搜索下的新共轭梯度法的全局收敛性[J]. 北京工商大学学报(自然科学版) 2008(01)
    • [4].Armijo型线搜索下一种共轭梯度法的收敛性[J]. 工程数学学报 2008(03)
    • [5].Armijo型线搜索下的全局收敛共轭梯度法[J]. 山东大学学报(理学版) 2017(01)
    • [6].Armijo型线搜索下一个修正Hestenes-Stiefel共轭梯度法的全局收敛性[J]. 内江师范学院学报 2012(04)
    • [7].基于Armijo准则的自适应稳定转换法[J]. 计算力学学报 2018(04)
    • [8].一类Armijo搜索下新的共轭梯度法及其全局收敛性[J]. 河南师范大学学报(自然科学版) 2015(06)
    • [9].一类Armijo搜索下的记忆梯度法及其全局收敛性[J]. 太原科技大学学报 2010(03)
    • [10].Armijo搜索下改进的LS共轭梯度法[J]. 陕西理工学院学报(自然科学版) 2013(03)
    • [11].一类Armijo搜索下的混合HS-PRP共轭梯度法[J]. 工程数学学报 2013(03)
    • [12].Armijo线搜索修正LS共轭梯度法的收敛性[J]. 广西科学 2012(01)
    • [13].Armijo线性搜索下的多步下降算法[J]. 数学杂志 2012(05)
    • [14].基于Armijo搜索步长的几种共轭梯度法的分析对比[J]. 成都信息工程大学学报 2019(02)
    • [15].Armijo线搜索下一个修正的PRP共轭梯度法的全局收敛性[J]. 广西科技师范学院学报 2017(02)
    • [16].Armijo型线搜索下的三项共轭梯度法[J]. 西北师范大学学报(自然科学版) 2011(05)
    • [17].Armijo线搜索下谱共轭梯度法全局收敛的一个充分条件[J]. 贵州师范大学学报(自然科学版) 2014(02)
    • [18].Armijo型线搜索一个修正LS共轭梯度法的全局收敛性[J]. 重庆师范大学学报(自然科学版) 2012(06)
    • [19].一类基于Armijo线搜索的新的谱共轭梯度法[J]. 河南理工大学学报(自然科学版) 2019(04)
    • [20].结合广义Armijo步长搜索的一类记忆梯度算法及其收敛特征[J]. 工程数学学报 2012(02)
    • [21].结合Armijo步长搜索的一类新的记忆梯度算法及其收敛特征[J]. 数学的实践与认识 2012(20)
    • [22].结合广义Armijo步长搜索的一类记忆梯度算法[J]. 郑州大学学报(理学版) 2011(03)
    • [23].基于Armijo型线搜索下的谱共轭梯度法[J]. 太原科技大学学报 2011(06)
    • [24].一种Armijo搜索下的谱共轭梯度法[J]. 太原科技大学学报 2013(06)
    • [25].非单调ARMIJO型线搜索下的新谱共轭梯度法[J]. 数学学习与研究 2015(07)
    • [26].利用Armijo型线性搜索HZ共轭梯度法的全局收敛性(英文)[J]. 运筹学学报 2011(01)
    • [27].Armijo搜索下的谱共轭梯度法[J]. 太原科技大学学报 2011(02)
    • [28].一类基于Armijo搜索的改进DY共轭梯度法及其全局收敛性[J]. 数值计算与计算机应用 2011(04)
    • [29].基于Armijo线搜索的布里渊散射谱图像降噪算法[J]. 中国激光 2019(09)
    • [30].Armijo型线搜索下的谱CD共轭梯度法[J]. 山东大学学报(理学版) 2010(11)

    标签:;  ;  ;  ;  ;  ;  

    Armijo搜索下求解无约束优化问题的扰动BFGS方法
    下载Doc文档

    猜你喜欢