修正Liu-Storey共轭梯度法:全局收敛性与数值试验

需积分: 9 1 下载量 113 浏览量 更新于2024-08-13 收藏 228KB PDF 举报
"一个修正Liu-Storey共轭梯度法的全局收敛性 (2012年)" 这篇论文主要探讨了一种修正的Liu-Storey(LS)非线性共轭梯度法,称为MLSCG算法,该算法是在无记忆BFGS拟牛顿法的框架下提出的。MLSCG算法的核心在于其搜索方向的构造,它在精确线搜索条件下可以等同于标准的Liu-Storey共轭梯度法。这一改进的关键点是,新的搜索方向不再依赖于特定的线搜索准则,而是具有充分下降性,即沿着这个方向函数值会显著减少。 在论文中,作者孟继东指出,MLSCG算法在采用一种Armijo型线搜索策略时,能够保证全局收敛性。Armijo型线搜索是一种常见的优化策略,它要求步长满足一定的下降条件,以确保每次迭代都能使目标函数值下降。全局收敛性意味着无论初始点如何选择,只要满足一定的条件,算法都能够收敛到问题的全局极小值。 数值实验部分,作者对比了MLSCG算法与其他几种著名的共轭梯度法,如PRP、HS和LS算法。结果显示,在处理多数测试问题时,MLSCG算法在计算效率和收敛速度上表现更优,这进一步验证了其设计的有效性。 论文的关键词包括共轭梯度法、修正LS共轭梯度法、Armijo型线搜索和全局收敛性,这些都是优化领域的重要概念。共轭梯度法是一种求解大型线性系统的高效方法,尤其适用于对称正定矩阵;修正LS共轭梯度法是对原有算法的改进,旨在提高其性能;Armijo型线搜索则是一种常用的步长选择策略,用于确保算法的收敛性;全局收敛性是优化算法的理论基础,确保算法在所有初始点下都能找到最优解。 这篇2012年的研究工作为非线性优化领域提供了一个新的、具有全局收敛性的共轭梯度法变体,通过改进的Liu-Storey算法和特定的线搜索策略,提高了算法的性能和适用范围。