Kybernetika 49 2号, 224-235, 2013

一般有限记忆变量度量方法的递归形式

拉迪斯拉夫·卢克尚扬·维尔切克

摘要:

在本报告中,我们提出了一种新的有限内存变量度量方法的递归矩阵公式。这种方法可以用于Broyden类的任意更新(和一些其他更新),也可以用于Hessian矩阵及其逆矩阵的近似。新的递归公式每次迭代需要大约400万美元的乘法和加法运算,因此它可以与其他有效的有限内存变量度量方法进行比较。关于本报告中提出的算法1的数值实验证实了其实际效率。

关键词:

算法、无约束优化、大规模优化、可变度量更新、递归矩阵公式、有限内存方法

分类:

49K35、90C06、90C47、90C51

参考文献:

  1. I.Bongartz、A.R.Conn、N.Gould和P.L.Toint:CUTE:约束和非约束测试环境。 ACM事务处理。数学。软件21(1995),123-160。 交叉参考
  2. R.H.Byrd、J.Nocedal和R.B.Schnabel:拟纽顿矩阵的表示及其在有限记忆方法中的应用。 数学。编程63(1994),129-156。 交叉参考
  3. W.C.戴维登:无需行搜索的最优条件优化算法。 数学。编程9(1975),1-30。 交叉参考
  4. E.D.Dolan和J.J.Moré:使用性能配置文件对优化软件进行基准测试。 数学。编程91(2002),201-213。 交叉参考
  5. S.Hoshino公司:可变度量方法的公式。 J.数学及其应用研究所10(1972),394-403。 交叉参考
  6. 卢克桑:无约束极小化的无投影拟Newton方法。 Kybernetika第18页(1982年),第290-306页。 交叉参考
  7. L.Lukšan、C.Matonoha和J.Vlček:无约束优化的稀疏测试问题。 报告V-1064,计算机科学研究所AS CR,布拉格,2010年。 交叉参考
  8. L.Lukšan、C.Matonoha和J.Vlček:稀疏无约束优化的改进CUTE问题。 报告V-1081,AS CR计算机科学研究所,布拉格,2010年。 交叉参考
  9. L.Lukšan和E.Spedicato:无约束优化和非线性最小二乘的变尺度方法。 J.计算。应用。数学。124 (2000), 61-95. 交叉参考
  10. H.Matthies和G.Strang:非线性有限元方程的解。 国际。J.数字。方法工程14(1979),1613-1623。 交叉参考
  11. J.诺塞达尔:用有限存储更新拟Newton矩阵。 数学。计算。35 (1980), 773-782. 交叉参考
  12. J.Vlček和L.Lukšan:基于拟乘积更新形式的有限记忆BFGS方法的推广。 报告V-1060,AS CR计算机科学研究所,布拉格,2009年。 交叉参考