非线性最优化的几种算法研究

非线性最优化的几种算法研究

论文摘要

对求解无约束优化问题的共轭梯度法中的方向参数给定了一种新的区间取法以保证搜索方向是目标函数的充分下降方向,在此基础上提出了一种新的记忆梯度算法,在目标函数的梯度一致连续的条件下证明了算法的全局收敛性,数值试验表明新算法是有效的.然后将该算法应用于以下两个方面的研究:(i)在将互补问题转化为无约束优化问题的基础上,应用记忆梯度算法求解之并证明了算法的收敛性和线性收敛速度;(ii)在通过广义D-gap函数将半定互补问题转化为无约束优化问题的基础上,应用记忆梯度算法求解之并证明了算法的收敛性.进一步,增加记忆项的项数,将记忆梯度算法推广到三项记忆梯度算法,在算法的步长选取上提出了一种新的非单调线搜索技巧,该线搜索在每一迭代步内得到较大的步长,有利于算法的快速收敛,在目标函数的梯度一致连续的条件下证明了算法的全局收敛性,并在一定条件下讨论了算法线性收敛速度.最后,应用三项记忆梯度算法求解信赖域子问题,该方法保证试探步的充分下降性,并结合线搜索技巧,即在试探步不成功时,不重解信赖域子问题,而采用非精确Armijo线搜索获得下一迭代点,从而减少了计算量.在此基础上,提出了一种带线搜索的信赖域算法,在一定的条件下证明了算法的全局收敛性.数值试验表明新算法是有效的.

论文目录

  • 中文摘要
  • 英文摘要
  • 第1章 前言
  • 1.1 记忆梯度算法简介
  • 1.2 互补问题与半定互补问题算法简介
  • 1.2.1 互补问题算法简介
  • 1.2.2 半定互补问题算法简介
  • 1.3 信赖域算法简介
  • 第2章 一种新记忆梯度算法及其全局收敛性
  • 2.1 算法及性质
  • 2.2 算法的全局收敛性
  • 2.3 数值试验
  • 第3章 一类求解互补问题的新记忆梯度算法
  • 3.1 算法及其性质
  • 3.2 算法的全局收敛性
  • 3.3 线性收敛速率
  • 3.4 数值试验
  • 第4章 求解半定互补问题的记忆梯度算法
  • 4.1 半定互补问题的广义D-gap函数
  • 4.2 算法及其收敛性
  • 第5章 改进的非单调搜索下的三项记忆梯度算法
  • 5.1 算法及其性质
  • 5.2 算法的全局收敛性
  • 5.3 线性收敛速度
  • 5.4 数值试验
  • 第6章 带线搜索的信赖域算法及其子问题求解
  • 6.1 算法及其性质
  • 6.2 算法的全局收敛性
  • 6.3 数值试验
  • 第7章 结论
  • 参考文献
  • 致谢
  • 个人简历、在学期间的研究成果
  • 相关论文文献

    标签:;  ;  ;  ;  ;  

    非线性最优化的几种算法研究
    下载Doc文档

    猜你喜欢