×

Levenberg-Marquardt方法在Hölder度量分区域下的局部收敛性。 (英语) Zbl 1494.65036号

小结:我们描述并分析了求解非线性方程组的Levenberg-Marquardt方法。更具体地说,我们提出了一个Levenberg-Marquardt参数的自适应公式,并分析了该方法在定义方程的函数的Hölder度量子区域性和其梯度映射的Hólder连续性下的局部收敛性。进一步,我们分析了该方法在附加的假设下的局部收敛性,即Łojasiewicz梯度不等式成立。我们最后报告了令人鼓舞的数值结果,证实了生物化学反应网络中计算部分守恒稳态问题的理论发现。这个问题可以归结为寻找非线性方程组的解,其中相关的映射满足Łojasiewicz梯度不等式假设。

MSC公司:

65千5 数值数学规划方法
65K10码 数值优化和变分技术
49J53型 集值与变分分析
90立方厘米26 非凸规划,全局优化
92立方厘米 系统生物学、网络
PDF格式BibTeX公司 XML格式引用

参考文献:

[1] Ahookhosh,M.,Fleming,R.M.T.,Voung,P.T.:通过全局收敛的Levenberg-Marquardt方法寻找Hölder度量次区域映射的零点,arXiv:1812.00818·Zbl 1501.90069号
[2] 阿拉贡·阿尔塔乔,Fj;Fleming,R.,双单调映射零点的全局收敛算法,Optim。莱特。,9, 3, 569-584 (2015) ·Zbl 1339.90311号
[3] 阿拉贡·阿塔乔(Aragón Artacho),Fj;弗莱明,R。;Vuong,Pt,加速平滑函数的DC算法,数学。程序。,169B,195-118(2018)·Zbl 1461.65118号
[4] Attouch,H。;Bolt,J.,关于涉及分析特征的非光滑函数的近似算法的收敛性,数学。程序。,116、1-2、5-16(2009年)·Zbl 1165.90018号
[5] Attouch,H。;波尔特,J。;Svaiter,Bf,半代数和驯服问题下降方法的收敛性:近似算法,前向-后向分裂,正则高斯-赛德尔方法,数学。程序。,137A、1-2、91-129(2013)·Zbl 1260.49048号
[6] Behling,R。;Iusem,A.,平静对非线性方程组解集的影响,数学。程序。,137A、1-2、155-165(2013)·Zbl 1266.65079号
[7] 南卡罗来纳州贝拉维亚。;Cartis,C。;古尔德,N。;莫里尼,B。;Toint,Pl,非线性最小二乘正则化欧几里德残差算法的收敛性,SIAM J.Numer。分析。,48, 1, 1-29 (2010) ·Zbl 1218.90182号
[8] 南卡罗来纳州贝拉维亚。;Morini,B.,非线性最小二乘自适应正则化方法的强局部收敛性,IMA J.Numer。分析。,35, 2, 947-968 (2015) ·Zbl 1316.65061号
[9] 波尔特,J。;Danilidis,A。;Lewis,A.,非光滑子分析函数的Łojasiewicz不等式及其在次梯度动力系统中的应用,SIAM J.Optimiz。,17, 4, 1205-1223 (2007) ·Zbl 1129.26012号
[10] 波尔特,J。;Danilidis,A。;O.莱伊。;Mazet,L.,Lojasiewicz不等式的特征:次梯度流,talweg,凸性,Trans。阿默尔。数学。Soc.,362,6,3319-3363(2010年)·Zbl 1202.26026号
[11] Cibulka,R。;Al Dontchev;Kruger,Ay,变分分析与优化中映射的强度量子区域性,J.Math。分析。申请。,457,21247-1282(2018)·Zbl 1376.49048号
[12] Ed Dolan;Moré,Jj,带性能配置文件的基准优化软件,数学。程序。,91B,201-213(2002)·邮编:1049.90004
[13] Al Dontchev;Rockafellar,Rt,隐函数和解映射,第2版。Springer运筹学和金融工程系列(2014),纽约:Springer,纽约·Zbl 1337.26003号
[14] 艾伦伯格,G.,《孤子:物理学家的数学方法》(1983),柏林:施普林格出版社,柏林·Zbl 0455.35001号
[15] Fan,J.,局部误差约束条件下非线性方程信赖域方法的收敛速度,计算。最佳方案。申请。,34, 2, 215-227 (2006) ·Zbl 1121.65054号
[16] Fan,J.,三次收敛非线性方程的修正Levenberg-Marquardt方法,数学。计算。,81, 277, 447-466 (2012) ·Zbl 1242.65103号
[17] 范,J。;Pan,J.,关于Levenberg-Marquardt参数的注释,应用。数学。计算。,207, 351-359 (2009) ·Zbl 1172.65024号
[18] 范,J。;Yuan,Y.,关于无非奇异性假设的Levenberg-Marquardt方法的二次收敛性,计算,74,1,23-39(2005)·Zbl 1076.65047号
[19] Fischer,A.,具有非孤立解的广义方程迭代框架的局部行为,数学。程序。,94B、191-124(2002)·Zbl 1023.90067号
[20] Fischer,A。;Herrich,M。;伊兹迈洛夫,阿富汗;Solodov,Mv,一种全局收敛的LP-newton方法,SIAM J.Optim。,26, 4, 2012-2033 (2015) ·Zbl 1348.90583号
[21] 弗莱明,R。;Thiele,I.,质量守恒的基本动力学足以证明非平衡稳态浓度的存在,J.Theoret。《生物学》,314173-181(2012)·Zbl 1397.92284号
[22] 弗莱明,Rm;弗拉西斯,N。;蒂勒,I。;Saunders,Ma,生化网络中通量和浓度二元性的条件,J.Theoret。生物学,409,1-10(2016)·Zbl 1405.92103号
[23] Gevorgyan,A。;Poolman,M。;Fell,D.,生物分子模型中化学计量不一致性的检测,生物信息学,24,19,2245-2251(2008)
[24] Guo,L。;林,Gh;Ye,Jj,用平衡约束求解数学规划,J.Optim。理论应用。,166, 1, 234-256 (2015) ·Zbl 1327.90233号
[25] Gwoździewicz,J.,解析函数在孤立零点的Łojasiewicz指数,注释。数学。帮助。,74, 3, 364-375 (1999) ·Zbl 0948.32028号
[26] Haraldsdóttir,Hs;Fleming,Rm,通过原子跃迁网络的图论分析识别代谢网络中的保守部分,PLos Compute。生物,12,11,e1004999(2016)
[27] Hasegawa,A.,等离子体不稳定性和非线性效应(1975),柏林:施普林格,柏林
[28] 劳伦特·海伦特;Sylvain Arreckx;托马斯·普法;塞巴斯蒂安·门多萨。;安妮·瑞泽尔(Anne Richelle);阿尔穆特·海因肯;Haraldsdóttir,Hulda S。;雅切克·瓦乔维克;Sarah M.基廷。;瓦尼亚·弗拉索夫;马格努斯·多蒂尔(Magnusdóttir),斯特凡尼亚(Stefania);Ng,Chiam Yu;Preciat,德语;贾加尔,艾莉丝;Chan,Siu H.J。;Aurich,Maike K。;凯瑟琳·克兰西。;詹妮弗·莫达米奥(Jennifer Modamio);约翰·索尔斯(John T.Sauls)。;阿尔贝托·诺罗尼亚;博尔德巴尔(Aarash Bordbar);本杰明·卡辛斯(Benjamin Cousins);El Assal,Diana C。;路易斯五世·瓦尔卡尔。;伊尼戈阿帕奥拉扎;苏珊·加德利(Susan Ghaderi);Ahookhosh,Masoud;马鲁恩本·盖比拉;安德烈斯·科斯特罗明斯;尼古拉斯·桑帕拉克(Nicolas Sompairac);Le,Hoai M。;马,丁;孙月凯;王林;詹姆斯·T·尤尔科维奇(James T.Yurkovich)。;米盖尔·奥利维拉(Miguel A.P.Oliveira)。;Voung,Phan T。;El Assal,Lemmer P。;库珀斯坦(Inna Kuperstein);安德烈·齐诺维耶夫;H.Scott Hinton;威廉·布莱恩特。;Aragón Artacho,Francisco J。;Planes,Francisco J。;史泰利赞(Stalidzans)、埃及(Egils);亚历杭德罗·马斯;桑托什温帕拉;迈克尔·哈卡;迈克尔·桑德斯(Michael A.Saunders)。;Costas D.Maranas。;Lewis,Nathan E。;托马斯·索特;伯恩哈德·帕尔森。;伊内斯·蒂勒;Fleming,Ronan M.T.,《使用COBRA工具箱v.3.0创建和分析基于生化约束的模型》,《自然协议》,第14、3、639-702页(2019年)
[29] Hoffman,A.,《关于线性不等式组的近似解》,J.Res.Nat.Bur。标准,49,263-265(1952)
[30] 伊兹迈洛夫,阿富汗;Solodov,Mv,带Lipschitz导数的2-正则映射的误差界及其应用,数学。程序。,89B,3413-435(2001)·Zbl 1023.90062号
[31] 伊兹迈洛夫,阿富汗;Solodov,Mv,带有Lipschitz导数的映射的2-正则性理论及其在最优性条件中的应用,数学。操作。第27、3、614-635号决议(2002年)·Zbl 1082.90136号
[32] 伊兹迈洛夫,阿富汗;Solodov,Mv,《优化和变分问题的牛顿型方法》(2014),柏林:施普林格出版社,柏林·兹比尔1304.49001
[33] 坎佐,C。;北山下。;Fukushima,M.,Levenberg-Marquardt方法,用于求解具有凸约束的非线性方程,J.Compute。申请。数学。,172, 2, 375-397 (2004) ·Zbl 1064.65037号
[34] 卡拉斯,尤因;桑托斯,Sa;Svaiter,Bf,计算Levenberg-Marquardt方法正则化参数的代数规则,计算。最佳方案。申请。,65, 3, 723-751 (2016) ·Zbl 1383.90038号
[35] Kelley,C.,迭代优化方法。《前沿应用数学》,第18卷(1999),费城:SIAM,费城·Zbl 0934.90082号
[36] 克拉姆特,S。;豪斯,乌尤;Theis,F.,Hypergraphs和蜂窝网络,PLoS Compute。生物,5,5,e1000385(2009)
[37] Kruger,A.,误差界和Hölder度量子区域性,集值变量分析。,23, 4, 705-736 (2015) ·Zbl 1330.49012号
[38] 库尔迪卡,K。;Spodzieja,S.,实代数集的分离与Łojasiewicz指数,Proc。阿默尔。数学。Soc.,142,9,3089-3102(2014)·Zbl 1305.32002号
[39] 李·G。;Mordukhovich,B.,Hölder度量分区域及其近点方法应用,SIAM J.Optim。,22, 4, 1655-1684 (2012) ·Zbl 1260.49069号
[40] Lojasiewicz,S.:《格拉科维大学半分析集成》(Ensembles semi-analytiques universityéde Gracovie,1965)
[41] 马,C。;蒋,L.,关于非线性方程Levenberg-Marquardt方法的一些研究,应用。数学。计算。,184, 1032-1040 (2007) ·Zbl 1114.65054号
[42] Mordukhovich,Bs,变分分析与广义微分I(2006),柏林:施普林格出版社,柏林
[43] 莫杜霍维奇,Bs;欧阳,W.,高阶度量子区域及其应用,J.Global Optim。,63, 4, 777-795 (2015) ·Zbl 1329.49029号
[44] 莫雷,J。;Garbow,B。;Hillstrom,K.,《测试无约束优化软件》,ACM Trans。数学。软件,7,1,17-41(1981)·Zbl 0454.65049号
[45] Ngai,Hv,多面体约束下凸多项式系统的全局误差界,SIAM J.on Optim。,25, 1, 521-539 (2015) ·兹伯利1339.49013
[46] Nocedal,J。;Wright,S.,《数值优化》(2006),纽约:Springer,纽约·兹比尔1104.65059
[47] Ortega,J.,Rheinboldt,W.:多变量非线性方程的迭代解。工业和应用数学学会(2000年)·Zbl 0949.65053号
[48] Pang,J.,《数学编程中的误差界限》,《数学》。程序。,79B、1-3、299-332(1997)·Zbl 0887.90165号
[49] Parks,H。;Krantz,S.,《真实分析函数入门》(1992),剑桥:Birkhäuser,剑桥·Zbl 0767.26001号
[50] Vui,H.,非退化多项式的全局Holderian误差界,SIAM J.Optim。,23, 2, 917-933 (2013) ·Zbl 1273.32014年
[51] Whitham,Gb,线性和非线性波(1974),纽约:威利,纽约·Zbl 0373.76001号
[52] Yamashita,N.,Fukushima,M.Alefeld,G.,Chen,X.(编辑):关于Levenberg-Marquardt方法的收敛速度,第15卷。施普林格,维也纳(2001)·Zbl 1001.65047号
[53] Yuan,Y.,信赖域算法的最新进展,数学。程序。,151B、1249-281(2015)·Zbl 1317.65141号
[54] 朱,X。;Lin,Gh,非线性方程的改进Levenberg-Marquardt方法的收敛性结果及其在MPCC中的应用,Optim。方法软件。,31, 4, 791-804 (2016) ·Zbl 1386.90154号
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。