×

改进的Fletcher-Reeves和Dai-Yuan共轭梯度法具有强Wolfe线搜索。 (英语) Zbl 1409.90092号

摘要:共轭梯度法(CGM)是求解大规模无约束优化问题的非常有效的迭代方法。这项工作的目的是改进Fletcher-Reeves和Dai-Yuan CGM。首先,基于Fletcher-Reeves(FR)方法和Dai-Yuan(DY)方法的共轭参数,结合强Wolfe线搜索的第二个不等式,构造了两个新的共轭参数。其次,利用这两个新的共轭参数,提出了另一个FR型共轭参数。第三,利用强Wolfe线搜索得到步长,针对大规模无约束优化问题,提出了三种改进的CGM。在通常的假设下,证明了改进的方法都具有足够的下降性和全局收敛性。最后,报告了三组实验及其相应的性能曲线,表明所提出的方法是非常有前途的。

MSC公司:

90B40码 搜索理论
PDF格式BibTeX公司 XML格式引用
全文: 内政部

参考文献:

[1] Hestenes,M.R。;Stiefel,E.,求解线性方程的共轭梯度法,J.Res.Natl。伯尔。支架。,49, 6, 409-436, (1952) ·Zbl 0048.09901号
[2] 弗莱彻,R。;Reeves,C.M.,共轭梯度函数最小化,计算。J.,7,2,149-154(1964)·Zbl 0132.11701号
[3] Polak,E。;Ribière,G.,《关于方向方法收敛性的注释》,Rev.Fr.Inform。里奇。操作。,3, 16, 35-43, (1969) ·Zbl 0174.48001号
[4] Polyak,B.T.,极端问题中的共轭梯度法,苏联计算机。数学。数学。物理。,9, 4, 94-112, (1969) ·Zbl 0229.49023号
[5] Dai,Y.H。;Yuan,Y.X.,一种具有强全局收敛性的非线性共轭梯度法,SIAM J.Optim。,10, 1, 177-182, (1999) ·兹比尔0957.65061
[6] Zoutendijk,G.,《非线性规划计算方法》,(Abadie,J.,《整数与非线性规划》,(1970),北荷兰:北荷兰阿姆斯特丹),37-86·Zbl 0336.90057号
[7] Al-Baali,M.,具有不精确线搜索的Flector-Reeves方法的下降性质和全局收敛性,IMA J.Numer。分析。,5, 1, 121-124, (1985) ·兹比尔0578.65063
[8] 刘国华。;Han,J.Y。;Yin,H.X.,带不精确线搜索的Fletcher-Reeves算法的全局收敛,应用。数学。J.中国大学。B、 1995年10月1日,第75-82页·Zbl 0834.90122号
[9] 海格,W.W。;Zhang,H.,一种具有保证下降和有效线搜索的新共轭梯度方法,SIAM J.Optim。,16, 1, 170-192, (2005) ·邮编1093.90085
[10] 海格,W.W。;Zhang,H.,非线性共轭梯度法综述,Pac。J.Optim。,2, 1, 35-58, (2006) ·兹比尔1117.90048
[11] Yu,G.H。;Guan,L.T。;Li,G.Y.,具有充分下降性质的修正Polak-Ribiere-Polyak共轭梯度法的全局收敛性,J.Ind.Manag。最佳。,4, 565-579, (2008) ·Zbl 1168.65030号
[12] Li,G.Y。;Tang,C.M。;Wei,Z.X.,无约束优化的新共轭条件和相关的新共轭梯度法,J.Compute。申请。数学。,202, 523-539, (2007) ·Zbl 1116.65069号
[13] Andrei,N.,无约束优化的混合共轭梯度算法,J.Optim。理论应用。,141249-264,(2009年)·Zbl 1168.90017号
[14] 张磊,用于优化计算的一种改进的魏耀柳非线性共轭梯度法,应用。数学。计算。,215, 2269-2274, (2009) ·Zbl 1181.65089号
[15] Xiao,Y.H。;王庆云。;Wang,D.,《戴元元修正谱梯度法注释》,J.Compute。申请。数学。,234, 10, 2986-2992, (2010) ·Zbl 1195.65081号
[16] Y.Narushima。;Yabe,H。;Ford,J.A.,无约束优化问题的具有充分下降性的三项共轭梯度法,SIAM J.Optim。,21, 212-230, (2011) ·Zbl 1250.90087号
[17] 戴振芳。;Wen,F.H.,另一种具有充分下降性的改进的Wei-Yao-Liu非线性共轭梯度法,Appl。数学。计算。,218, 7421-7430, (2012) ·Zbl 1254.65074号
[18] 姜晓中。;Jian,J.B。;Ma,G.D.,两种具有充分下降性质的共轭梯度法,《数学学报》。Sinica(Chin.Ser.),57,2,365-372,(2014)·兹比尔1313.65141
[19] 姜晓中。;Jian,J.B.,无约束优化的两种带干扰因子的修正共轭梯度法,非线性动力学。,77, 387-397, (2014) ·Zbl 1314.90065号
[20] Dai,Y.H。;Kou,C.X.,一种具有优化特性和改进Wolfe线搜索的非线性共轭梯度算法,SIAM J.Optim。,23, 296-320, (2013) ·Zbl 1266.49065号
[21] 寇,C.X。;Dai,Y.H.,无约束优化的改进自缩放无记忆Broyden-Flecher-Goldfarb-Shanno方法,J.Optim。理论应用。,165, 1, 209-224, (2015) ·兹伯利1319.49042
[22] Fatemi,M.,无约束优化的一种新的有效共轭梯度法,J.Compute。申请。数学。,300, 207-216, (2016) ·Zbl 1382.65170号
[23] 董,X.L。;Han,D.R。;甘巴里(Ghanbari,R.)。;李,X.L。;Dai,Z.F.,一些新的具有仿射组合的三项Hestenes-Stiefel共轭梯度法,Optim。,66, 5, 759-776, (2017) ·Zbl 1375.90281号
[24] Glibert,J.C。;Nocedal,J.,共轭梯度法优化的全局收敛性,SIAM J.Optim。,2, 21-42, (1992) ·Zbl 0767.90082号
[25] Dai,Y.H。;袁永新,无约束优化的一种有效的混合共轭梯度法,Ann.Oper。决议,103,33-47,(2001)·Zbl 1007.90065号
[26] Dai,Y.H。;袁永新,非线性共轭梯度法,(2000),上海科学技术出版社:上海科学技术出版公司
[27] 海格,W.W。;Zhang,H.,算法851:CG-DESCENT,一种保证下降的共轭梯度法,ACM-Trans。数学。柔和。(TOMS),32,1,113-137,(2006)·Zbl 1346.90816号
[28] 新墨西哥州古尔德。;Orban,D。;Toint,P.L.,CUTEr和SifDec:受限和非受限测试环境,重访Acm Trans。数学。柔和。(TOMS),29,4,373-394,(2003)·Zbl 1068.90526号
[29] Dolan,E.D。;Morè,J.,《性能曲线基准优化软件》,数学。程序。,91, 201-213, (2002) ·邮编:1049.90004
[30] Fletcher,R.,《实用优化方法第1卷:无约束优化》,(1987),John Wiley Sons:John Willey Sons纽约·Zbl 0905.65002号
[31] 刘,Y。;Storey,C.,高效广义共轭梯度算法,第1部分:理论,J.Optim。理论应用。,69129-137(1991年)·Zbl 0702.90077号
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。