×

黎曼流形上非线性方程的谱残差法。 (英语) Zbl 1476.65101号

摘要:本文将非线性方程组的谱算法(SANE)应用于黎曼流形上给定切向量场的零点问题。SANE的广义版本系统地使用切线向量场作为搜索方向,并使用一个连续的实值函数来适应此方向,确保它验证相关价值函数的下降条件。为了加快该方法的收敛速度,我们将黎曼自适应谱参数与非单调全球化技术相结合。在一些标准假设下,建立了该方法的全局收敛性。数值结果表明,我们的算法是求解不同黎曼流形上切向量场的非常有效的算法,与最近发表的Polak-Ribiére-Polyak方法和文献中存在的其他方法相比,具有很好的竞争力。

MSC公司:

65千5 数值数学规划方法
90立方 非线性规划
90 C56 无导数方法和使用广义导数的方法
53C21号 整体黎曼几何方法,包括PDE方法;曲率限制
PDF格式BibTeX公司 XML格式引用

参考文献:

[1] Absil P-A,Gallivan KA(2006)《独立成分分析中斜流形的联合对角化》。2006年IEEE声学语音和信号处理国际会议,第5卷,第V-V页。IEEE
[2] 绝对值,P-A;Mahony,R。;Sepulchre,R.,矩阵流形上的优化算法(2009),普林斯顿:普林斯顿大学出版社,普林斯顿·Zbl 1147.65043号
[3] 阿德勒,RL;德迪厄,J-P;Margulies,JY;Martens,M。;Shub,M.,关于黎曼流形和人体脊柱几何模型的牛顿方法,IMA J Numer Ana,22,3,359-390(2002)·Zbl 1056.92002号 ·doi:10.1093/imanum/22.3.359
[4] Barzilai,J。;Borwein,JM,两点步长梯度法,IMA J Numer Anal,8,1,141-148(1988)·Zbl 0638.65055号 ·doi:10.1093/imanum/8.1.141
[5] Boumal,N。;Bamdev,M。;绝对值,P-A;Sepulchre,R.,Manopt,一个用于流形优化的matlab工具箱,J Mach Learn Res,15,1,1455-1459(2014)·Zbl 1319.90003号
[6] 育种,P。;Vannieuwenhoven,N.,黎曼-高斯-牛顿方法的收敛性分析及其与几何条件数的联系,Appl Math Lett,78,42-50(2018)·Zbl 1381.65043号 ·doi:10.1016/j.aml.2017.10.009
[7] 塞德诺,OSD;Leon,HFO,正交约束优化的投影非单调搜索方法,计算应用数学,37,3,3118-3144(2018)·Zbl 1451.65073号 ·文件编号:10.1007/s40314-017-0501-6
[8] TA Davis;Hu,Y.,佛罗里达大学稀疏矩阵集合,ACM Trans Math Softw(TOMS),38,1,1(2011)·Zbl 1365.65123号
[9] Dolan,ED;Moré,JJ,具有性能配置文件的基准优化软件,数学程序,91,2201-213(2002)·邮编:1049.90004 ·doi:10.1007/s101070100263
[10] Edelman,A。;TA阿里亚斯;Smith,ST,正交约束算法的几何,SIAM J Matrix Anal Appl,20,2,303-353(1998)·Zbl 0928.6500号 ·doi:10.1137/S089547989529290954
[11] 格里波,L。;Lampariello,F。;Lucidi,S.,牛顿法的非单调线搜索技术,SIAM J Numer Ana,23,4,707-716(1986)·Zbl 0616.65067号 ·doi:10.1137/0723046
[12] 伊安娜佐,B。;Porcelli,M.,带非单调线搜索和矩阵几何平均值计算的黎曼-巴兹莱-鲍尔温方法,IMA J Numer Ana,38,1,495-517(2018)·Zbl 1477.65096号 ·doi:10.1093/imanum/drx015
[13] Jean-Pierre,D。;Pierre,P。;Gregorio,M.,关于黎曼流形的牛顿方法:协变α理论,IMA J Numer Anal,23,3,395-419(2003)·Zbl 1047.65037号 ·doi:10.1093/imanum/23.3395
[14] Kokiopoulou,E。;陈,J。;Saad,Y.,《降维方法中的轨迹优化和特征问题》,《数值线性代数应用》,18,3,565-602(2011)·Zbl 1249.65075号 ·doi:10.1002/nla.743
[15] La-Cruz,W。;Raydan,M.,大型非线性系统的非单调谱方法,Optim methods Softw,18,5,583-599(2003)·Zbl 1069.65056号 ·网址:10.1080/1055678031001610493
[16] 李,C。;Wang,J.,牛顿法的收敛性与黎曼流形上向量场零点的唯一性,中国科学院数学,48,11,1465-1478(2005)·Zbl 1116.53024号 ·doi:10.1360/04ys0147
[17] Manton,JH,利用单一约束的优化算法,IEEE Trans Signal Process,50,3,635-650(2002)·Zbl 1369.90169号 ·数字对象标识代码:10.1109/78.984753
[18] Martin,RM,《电子结构:基本理论和实践方法》(2020),剑桥:剑桥大学出版社,剑桥·Zbl 1442.74001号 ·doi:10.1017/9781108555586
[19] Oja,E.,神经网络、主成分和子空间,国际神经系统杂志,1,1,61-68(1989)·doi:10.1142/S0129065789000475
[20] Oviedo H(2021a)在zhang-hager型条件下黎曼线搜索方法的全局收敛性。在Optimization-Online中预打印。http://www.optimization-online.org/DB_HTML/2021/03/8297.HTML
[21] Oviedo H(2021b)用于正交约束优化的隐式最速下降算法。在Optimization-Online中预打印。http://www.optimization-online.org/DB_HTML/2020/03/7682.HTML
[22] Oviedo H(2021c)stiefel流形上的邻近点算法。在线优化预打印。http://www.optimization-online.org/DB_FILE/2021/05/8401.pdf
[23] 奥维耶多,H。;Dalmau,O.,stiefel流形上最小化的比例梯度投影方法,239-250(2019),纽约:Springer,纽约
[24] 奥维耶多,H。;Lara,H。;Dalmau,O.,stiefel流形上混合方向的非单调线性搜索算法,Optim Methods Softw,34,2,437-457(2019)·Zbl 1411.90326号 ·doi:10.1080/10556788.2017.1415337
[25] 奥维耶多,H。;O.达尔摩。;Lara,H.,用于stiefel流形约束优化的两种自适应缩放梯度投影方法,数值算法,87,3,1107-1127(2021)·Zbl 1470.90133号 ·doi:10.1007/s11075-020-01001-9
[26] Oviedo H,Guerrero S(2021)通过投影梯度法求解加权正交procutes问题。在Optimization-Online中预打印。http://www.optimization-online.org/DB_HTML/2021/05/8375.HTML
[27] Oviedo H,Herrera R(2021)辛stiefel流形的有效收缩映射。在Optimization-Online中预打印。http://www.optimization-online.org/DB_HTML/2021/07/8478.HTML
[28] Raydan,M.,关于梯度法的barzilai和borwein步长选择,IMA J Numer Anal,13,3,321-326(1993)·Zbl 0778.65045号 ·doi:10.1093/imanum/13.3321
[29] Raydan,M.,大规模无约束极小化问题的barzilai和borwein梯度法,SIAM J Optim,7,1,26-33(1997)·Zbl 0898.90119号 ·doi:10.1137/S1052623494266365
[30] 环,W。;Wirth,B.,黎曼流形上的优化方法及其在形状空间中的应用,SIAM J Optim,22,2,596-627(2012)·Zbl 1250.90111号 ·数字对象标识码:10.1137/1082885X
[31] 萨阿德,Y。;切里科夫斯基,JR;Shontz,SM,材料电子结构计算的数值方法,SIAM Rev,52,1,3-54(2010)·邮编:1185.82004 ·数字对象标识代码:10.1137/060651653
[32] Sato H(2014)关于stiefel流形上联合对角化的黎曼-牛顿方法及其在ica中的应用。arXiv预印本arXiv:1403.8064
[33] 佐藤,H。;Iwai,T.,一种新的全局收敛的黎曼共轭梯度法,《优化》,64,4,1011-1031(2015)·Zbl 1311.65072号 ·doi:10.1080/02331934.2013.836650
[34] Son NT,Absil P-A,Gao B,Stykel T(2021)基于迹最小化和黎曼优化的辛特征值问题。arXiv预打印arXiv:2101.02618,
[35] Turaga P,Veeraraghavan A,Chellappa R(2008)Stiefel和Grassmann流形的统计分析及其在计算机视觉中的应用。2008年IEEE计算机视觉和模式识别会议,第1-8页。电气与电子工程师协会
[36] 温,Z。;杨,C。;刘,X。;张毅,大规模特征空间计算的迹效最小化,科学计算杂志,66,3,1175-1203(2016)·Zbl 1373.65026号 ·doi:10.1007/s10915-015-0061-0
[37] 姚明,T-T;Zhao,Z。;Bai,Z-J;JinX-Q,切向量场的黎曼无导数polak-ribiére-polyak方法,数值算法,86,1,325-355(2021)·Zbl 1456.65044号 ·doi:10.1007/s11075-020-00891-z
[38] 张,H。;Hager,WW,非单调线搜索技术及其在无约束优化中的应用,SIAM J Optim,14,4,1043-1056(2004)·Zbl 1073.90024号 ·doi:10.1137/S1052623403428208
[39] 张,T。;Yang,Y.,《基于流形优化的稳健主成分分析》,J Mach Learn Res,19,1,3101-3139(2018)·Zbl 1478.62157号
[40] 张,X。;朱,J。;温,Z。;周,A.,电子结构计算的梯度型优化方法,SIAM科学计算杂志,36,3,C265-C289(2014)·Zbl 1300.82006号 ·doi:10.137/130932934
[41] Zhu,X.,stiefel流形优化的黎曼共轭梯度法,计算优化应用,67,1,73-110(2017)·Zbl 1401.90230号 ·doi:10.1007/s10589-016-9883-4
此参考列表基于出版商或数字数学图书馆提供的信息。它的项目与zbMATH标识符启发式匹配,并且可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。