×

用于最小化球面上二次型的SSM的全局收敛性。 (英语) Zbl 1059.90112号

摘要:在早期的一篇论文中[SIAM J.Optim.12,188–208(2001;Zbl 1058.90045号)],我们提出了序列子空间方法(SSM),用于最小化球面上的二次曲面。该方法通过在计算每次迭代后调整的子空间序列上执行最小化来生成对最小化器的近似。我们在早先的论文中表明,当子空间包含通过对一阶最优性系统应用牛顿方法的一步获得的向量时,SSM是局部二次收敛的,即使原始问题是用多个解退化的,并且在最优性系统中是奇异的雅可比矩阵。在本文中,我们证明了当每个SSM子空间包含以下三个向量时,SSM的(非局部)收敛到全局极小值:(i)当前迭代,(ii)在当前迭代时计算的代价函数的梯度,以及(iii)与代价函数Hessian的最小特征值相关的特征向量。对于非退化问题,当向量(i)–(iii)包含在SSM子空间中时,收敛速度至少是线性的。

MSC公司:

90C20个 二次规划
65层10 线性系统的迭代数值方法
65年20月 数值算法的复杂性和性能
PDF格式BibTeX公司 XML格式引用
全文: 内政部

参考文献:

[1] Richard H.Byrd、Robert B.Schnabel和Gerald A.Shultz,非线性约束优化的信赖域算法,SIAM J.Numer。分析。24(1987),第5期,1152-1170·Zbl 0631.65068号 ·doi:10.1137/0724076
[2] M.R.Celis、J.E.Dennis和R.A.Tapia,非线性等式约束优化的信赖域策略,数值优化,1984(Boulder,Colo.,1984)SIAM,宾夕法尼亚州费城,1985,第71–82页·Zbl 0566.65048号
[3] Mahmoud El-Alem,用于约束优化的Celis-Denis-Tapia信任区域算法的全局收敛理论,SIAM J.Numer。分析。28(1991),第1期,266–290·Zbl 0725.65061号 ·doi:10.1137/0728015
[4] Gene H.Golub和Urs von Matt,二次约束最小二乘和二次问题,数值。数学。59(1991),第6期,561-580·Zbl 0745.65029号 ·doi:10.1007/BF01385796
[5] Gene H.Golub和Charles F.Van Loan,《矩阵计算》,第二版,《约翰霍普金斯数学科学系列》,第3卷,约翰霍普金大学出版社,马里兰州巴尔的摩,1989年·Zbl 0733.65016号
[6] Nicholas I.M.Gould、Stefano Lucidi、Massimo Roma和Philippe L.Toint,使用Lanczos方法解决信任区域子问题,SIAM J.Optim。9(1999),第2期,504–525·Zbl 1047.90510号 ·doi:10.137/S1052623497322735
[7] William W.Hager,几乎奇异线性系统的迭代方法,SIAM J.Sci。计算。22(2000),第2期,747–766·Zbl 0967.65043号 ·doi:10.1137/S106482759834634X
[8] William W.Hager,最小化球面上的二次型,SIAM J.Optim。12(2001),第1期,188–208·Zbl 1058.90045号 ·doi:10.137/S105262349356071
[9] William W.Hager和Yaroslav Krylyuk,图划分和连续二次规划,SIAM J.离散数学。12(1999),第4期,500–523·Zbl 0972.90086号 ·doi:10.137/S0895480199335829
[10] William W.Hager和Yaroslav Krylyuk,多集图划分,数学。方法操作。第55号决议(2002年),第1号,第1-10号·Zbl 1031.90053号 ·doi:10.1007/s001860200173
[11] W.MENKE,《地球物理数据分析:离散反演理论》,学术出版社,圣地亚哥,1989年·Zbl 0716.73026号
[12] J.J.Moré,信赖域方法算法和软件的最新发展,《数学规划:最新进展》(波恩,1982),施普林格,柏林,1983年,第258-287页。
[13] Jorge J.Moré和D.C.Sorensen,计算信任区域步骤,SIAM J.Sci。统计师。计算。4(1983年),第3期,553-572·Zbl 0551.65042号 ·doi:10.1137/0904038
[14] Beresford N.Parlett,对称特征值问题,Prentice-Hall,Inc.,新泽西州恩格尔伍德克利夫斯,1980年。计算数学Prentice-Hall系列·Zbl 0431.65017
[15] 鲍威尔和袁毅,等式约束优化的信赖域算法,数学。编程49(1990/91),第2期,(Ser.A),189-211·Zbl 0816.90121号 ·doi:10.1007/BF01588787
[16] Franz Rendl和Henry Wolkowicz,信赖域子问题的半定框架及其在大规模最小化中的应用,数学。Programming 77(1997),第2期,Ser。B、 273-299。半定规划·Zbl 0888.90137号 ·doi:10.1016/S0025-5610(96)00080-9
[17] M.ROJAS,《离散病态问题正则化的大规模信任区域方法》,计算与应用数学博士论文,莱斯大学,德克萨斯州休斯顿,1998年5月。
[18] D.C.Sorensen,带模型信赖域修正的牛顿方法,SIAM J.Numer。分析。19(1982),第2409-426号·Zbl 0483.65039号 ·doi:10.1137/0719026
[19] D.C.Sorensen,球面约束下大型二次函数的最小化,SIAM J.Optim。7(1997),第1期,141-161·Zbl 0878.65044号 ·doi:10.1137/S1052623494274374
[20] 阿尔伯特·塔兰托拉(Albert Tarantola),反问题理论,爱思唯尔科学出版社,B.V.,阿姆斯特丹,1987年。数据拟合和模型参数估计方法·Zbl 0875.65001号
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。