Dai-Liao共轭梯度法和三项共轭梯度法的研究

Dai-Liao共轭梯度法和三项共轭梯度法的研究

论文摘要

最优化理论与方法是一门应用性很强的学科.近年来,随着科学技术的快速发展,实际生活中出现大量的大规模优化问题.共轭梯度法是求解大规模无约束优化问题的一类重要的方法,它具有存储要求低,迭代格式简单,稳定性高等特点.这些优点使得共轭梯度算法更能满足当今大数据和云计算时代的需求.基于Dai-Liao(DL)模型的共轭梯度法具有较稳定的数值性能,DL共轭梯度法的关键在于DL模型中参数的选取,其选取方式引起了学者的广泛关注和研究.随着越来越多的大规模问题出现,子空间技术变得尤为重要并广泛应用于最优化领域.最近,有很多学者将三项共轭梯度法与子空间技术结合,提出很多有效的三项共轭梯度算法.这种新的研究思路可以减少算法的计算量和提高算法的数值效果.因此,基于以上两种不同的思想,本文提出两种不同类型的共轭梯度算法.具体工作如下:1.针对DL共轭梯度法,提出一个新的DL模型参数的选取方式,得到一种新的基于DL模型的共轭梯度算法.通过极小化DL模型的方向矩阵条件数的上界,得到一个性质较好的DL参数,并且带有该参数的搜索方向满足充分下降性.基于对目标函数的合理假设,证明了改进的算法在Wolfe条件下对一般函数具有全局收敛性.数值实验验证了新的算法具有良好的数值性能,在Andrei测试函数集下优于经典的CG DESCENT(5.3)和CGOPT,在CUTEr测试集下优于CG DESCENT(5.3)和Babaie-Kadaki和Ghanbari提出的M1算法.2.针对大规模无约束优化问题,将子空间极小化思想推广到三项共轭梯度法上,通过在子空间(?)上极小化目标函数的二次模型,提出来一种自适应子空间三项共轭梯度算法.每一次迭代将通过判别准则来判断子空间的选取方式,并给出不同子空间下搜索方向的自适应选取准则.在一定条件下,证明搜索方向的两个重要的性质.在非单调线搜索条件下,证明了新的自适应三项共轭梯度算法对一般函数的全局收敛性.数值实验表明,新算法的数值性能优于经典的CG DESCENT(5.3),CGOPT和SMCG BB.

论文目录

  • 摘要
  • ABSTRACT
  • 符号对照表
  • 缩略语对照表
  • 第一章 绪论
  •   1.1 引言
  •   1.2 线搜索策略
  •   1.3 共轭梯度法
  •   1.4 三项共轭梯度法
  •   1.5 论文的内容和框架
  • 第二章 一种新的Dai-Liao共轭梯度法
  •   2.1 引言
  •   2.2 算法及其性质
  •   2.3 收敛性分析
  •   2.4 数值结果
  •   2.5 本章小结
  • 第三章 一种新的自适应子空间极小化三项共轭梯度法
  •   3.1 引言
  •   3.2 搜索方向的推导及自适应子空间三项共轭梯度算法的提出
  •     3.2.1 搜索方向的推导
  •     3.2.2 一个新的自适应子空间极小化的三项共轭梯度算法
  •   3.3 算法的性质
  •     3.3.1 搜索方向的两个理论性质
  •     3.3.2 收敛性分析
  •   3.4 数值结果
  •   3.5 本章小结
  • 第四章 总结与展望
  •   4.1 研究总结
  •   4.2 研究展望
  • 参考文献
  • 致谢
  • 作者简介
  • 文章来源

    类型: 硕士论文

    作者: 张珂珂

    导师: 刘红卫

    关键词: 共轭梯度法,模型,子空间极小化,三项共轭梯度法,充分下降性,全局收敛性

    来源: 西安电子科技大学

    年度: 2019

    分类: 基础科学

    专业: 数学

    单位: 西安电子科技大学

    分类号: O224

    DOI: 10.27389/d.cnki.gxadu.2019.000695

    总页数: 64

    文件大小: 2009K

    下载量: 66

    相关论文文献

    • [1].一个具有充分下降性的混合共轭梯度法[J]. 应用数学学报 2020(03)
    • [2].一类具有充分下降性的混合型谱共轭梯度法[J]. 西南大学学报(自然科学版) 2017(05)
    • [3].求解一类特殊极大值函数方程的光滑谱共轭梯度法[J]. 上海工程技术大学学报 2017(02)
    • [4].一个充分下降的杂交共轭梯度法[J]. 玉林师范学院学报 2015(05)
    • [5].解无约束优化的一个谱共轭梯度法[J]. 玉林师范学院学报 2016(02)
    • [6].基于混合快速共轭梯度法的有限差分对比源反演[J]. 石油地球物理勘探 2020(02)
    • [7].一个自调节Polak-Ribiere-Polyak型共轭梯度法[J]. 应用数学学报 2017(03)
    • [8].一个新的谱共轭梯度法[J]. 工程数学学报 2014(06)
    • [9].一类下降的谱共轭梯度法[J]. 广西民族师范学院学报 2013(03)
    • [10].非精确线搜索下一类新的混合共轭梯度法研究[J]. 河池学院学报 2011(02)
    • [11].无约束优化问题新的谱共轭梯度法(英文)[J]. 内蒙古大学学报(自然科学版) 2011(06)
    • [12].基于共轭梯度法迭代优化的图像分类算法[J]. 桂林电子科技大学学报 2019(06)
    • [13].求解线性方程组的一般共轭梯度法(英文)[J]. 数学理论与应用 2019(02)
    • [14].一种具有充分下降性的三项共轭梯度法[J]. 数学的实践与认识 2018(23)
    • [15].求解线性反问题的修正谱共轭梯度法[J]. 桂林电子科技大学学报 2018(03)
    • [16].一类充分下降的谱共轭梯度法[J]. 重庆师范大学学报(自然科学版) 2013(04)
    • [17].复共轭梯度法的结构[J]. 哈尔滨理工大学学报 2012(04)
    • [18].一种无约束优化问题的谱共轭梯度法[J]. 太原科技大学学报 2010(03)
    • [19].不完全左共轭梯度法及其数值表现[J]. 南京大学学报数学半年刊 2009(01)
    • [20].一个具有充分下降性质的共轭梯度法[J]. 湖北民族学院学报(自然科学版) 2019(02)
    • [21].共轭梯度法在最优化问题求解中的应用[J]. 中华少年 2015(22)
    • [22].求解大规模优化的混合共轭梯度法[J]. 工程数学学报 2013(01)
    • [23].共轭梯度法在信号处理中的应用思考[J]. 移动通信 2012(16)
    • [24].解线性方程组的共轭梯度法[J]. 新乡学院学报(自然科学版) 2011(04)
    • [25].一类共轭梯度法的全局收敛性[J]. 山东大学学报(理学版) 2010(05)
    • [26].精确线搜索下一种新的混合共轭梯度法[J]. 数学杂志 2018(03)
    • [27].一类求解无约束问题的混合参数共轭梯度法及全局收敛性[J]. 北华大学学报(自然科学版) 2016(01)
    • [28].强迫下降的三项共轭梯度法[J]. 数值计算与计算机应用 2012(03)
    • [29].基于共轭梯度法的混沌系统参数辨识和同步[J]. 仪器仪表学报 2008(04)
    • [30].求解线性逆问题的谱共轭梯度法[J]. 广西科学 2016(05)

    标签:;  ;  ;  ;  ;  ;  

    Dai-Liao共轭梯度法和三项共轭梯度法的研究
    下载Doc文档

    猜你喜欢