×

非凸多块优化的部分对称正则交替方向乘子法。 (中文。英文摘要) Zbl 1513.90142号

摘要:求解两块优化问题的交替方向乘子法(ADMM)的研究已经逐渐成熟和完善。然而,针对ADMM求解非凸多块优化问题的研究相对较少。本文首先针对线性约束下的非凸多块优化问题,提出了一种部分对称正则化ADMM。其次,在适当的假设下,包括乘法器更新公式中两个参数的区域,证明了该方法的全局收敛性。第三,当增广拉格朗日函数满足Kurdyka-Łojasiewicz(KL)性质时,证明了该方法的强收敛性。此外,当相关的KL性质函数具有特殊结构时,得到了该方法的次线性和线性收敛速度。最后,进行了一些初步的数值实验,这表明该方法是有效的。

理学硕士:

90C26型 非凸规划,全局优化
90立方 非线性规划

软件:

BADMM公司
PDF格式BibTeX公司 XML格式引用
全文: 链接

参考文献:

[1] Attouch H.,Bolt J.,关于涉及分析特征的非光滑函数的近似算法的收敛性,数学。程序。,2009, 116(1-2):5-16. ·Zbl 1165.90018号
[2] Bai J.,Liang J.,Guo K.,等,加速对称ADMM及其在信号处理中的应用,arXiv:1906.12015,2019。
[3] Bolt J.,Danilidis A.,Lewis A.,非光滑子分析函数的Lojasiewicz不等式及其在次梯度动力系统中的应用,SIAM J.Optim。,2007, 17(4):1205-1223. ·Zbl 1129.26012号
[4] Boyd S.、Parikh N.、Chu E等,通过交替方向乘数法进行分布式优化和统计学习,Found。趋势马赫数。学习。,2011, 31:1-122. ·Zbl 1229.90122号
[5] Candès E.、Li X.、Ma Y.等,稳健主成分分析?美国医学会期刊,2011,58(3):1-37·Zbl 1327.62369号
[6] 赵明,郑C.,张华,带替换程序的线性化交替方向乘法器方法,亚太地区。《运营杂志》。决议,2015,32(3):1550011·兹比尔1318.90071
[7] 赵明,邓忠,建军,结构不可分的非凸和非光滑问题的线性Bregman ADMM的收敛性,复杂性,2020,6237942·Zbl 1506.90206号
[8] 赵明,张毅,建军,非凸优化的惯性近端交替方向乘子法,国际计算杂志。数学。,https://doi.org/10.1080/00207160.2020.1812585, 2020. ·Zbl 1479.90165号
[9] Chen C.,He B.,Ye Y.,等,多块凸极小化问题ADMM的直接推广不一定收敛,数学。程序。,2016, 155(1-2):57-79. ·Zbl 1332.90193号
[10] 陈C.,关于乘法器多块交替方向法发散示例的一些注记(中文),Oper。Res.事务处理。,2019, 23(3):135-140. ·Zbl 1449.90284号
[11] Daubechies I.,Defrise M.,De Mol C.,稀疏约束线性逆问题的迭代阈值算法,Commun。纯应用程序。数学。,2003, 57(11):1413-1457. ·Zbl 1077.65055号
[12] Douglas J.,Rachford Jr.H.H.,关于二个和三个空间变量中热传导问题的数值解,Trans。阿默尔。数学。《社会学杂志》,1956,82(2):421-439·Zbl 0070.35401号
[13] Glowinski R.,非线性变分问题的数值方法,Springer-Verlag,纽约,1984年·Zbl 0536.65054号
[14] 顾瑜,江波,韩德,一种基于半近似的严格收缩Peaceman-Rachford分裂方法,arXiv:1506.022212015。
[15] 郭凯,韩德,王德,等,多块非凸可分离优化模型ADMM的收敛性,Front。数学。中国,2017,12(5):1139-1162·Zbl 1386.90114号
[16] 郭坤,韩德,吴涛,线性约束下两个非凸函数和极小化的交替方向法的收敛性,国际计算杂志。数学。,2017, 94(8):1653-1669. ·Zbl 1375.90239号
[17] 韩德,袁欣,关于乘数交替方向法的注记,J.Optim。理论应用。,2012, 155(1):227-238. ·Zbl 1255.90093号
[18] Han D.,Yuan X.,二次规划乘法器交替方向方法的局部线性收敛性,SIAM J.Numer。分析。,2013, 51(6):3446-3457. ·Zbl 1285.90033号
[19] He B.,单调结构变分不等式的并行分裂增广拉格朗日方法,计算。最佳方案。申请。,2009, 42(2):195-212. ·Zbl 1183.65080号
[20] 何斌,马峰,袁霞,大步距对称型ADMM的收敛性研究,SIAM J.成像科学。,2016, 9(3):1467-1501. ·Zbl 1381.90066号
[21] 何斌,陶明,袁欣,可分凸规划的高斯后代换交替方向法,SIAM J.Optim。,2012, 22(2):313-340. ·Zbl 1273.90152号
[22] 何斌,陶明,袁欣,可分凸规划的分裂方法,IMA J.Numer。分析。,2015, 35(1):394-426. ·Zbl 1310.65062号
[23] 何斌,袁霞,可分离凸规划的高斯后代换线性化交替方向法,数值。阿尔盖布。控制优化。,2013, 3(2):247-260. ·Zbl 1264.90139号
[24] 建建,张勇,赵明,一类非凸问题的正则化交替方向乘子方法,J.不等式。申请。,2019, 2019(1):193. ·兹比尔1499.90172
[25] 李忠,戴勇,混响环境下的最佳波束形成器设计(中文),科学。罪。数学。,2016, 46(06):877-892. ·Zbl 1499.94022号
[26] 刘明,建杰,基于ADMM的SQP方法在可分离光滑非凸优化中的应用,J.不等式。申请。,2020, 2020:81. ·Zbl 1503.65125号
[27] Lions P.,Mercier B.,两个非线性算子之和的分裂算法,SIAM J.Numer。分析。,1979, 16(6):964-979 ·Zbl 0426.6500号
[28] Nesterov Y.,《凸优化入门讲座:基础课程》,Springer Science&Business Media,波士顿,2013年。
[29] Peaceman D.,Rachford H.,抛物型和椭圆型微分方程的数值解,J.Soci。Ind.申请。数学。,1955, 3(1):28-41. ·Zbl 0067.35801号
[30] Rockafellar R.,Wets R.,变异分析,Springer科学与商业媒体,柏林,2009年。
[31] 王凤,曹伟,徐忠,非凸组合问题多块Bregman ADMM的收敛性,科学。中国资讯。科学。,2018, 61(12):122101.
[32] 王凤,徐振华,徐宏,非凸组合问题带乘子的Bregman交替方向法的收敛性,arXiv:1410.86252014。
[33] Wang Y.,Fan S.,用于地震时频分析的加权(l_1\)范数约束稀疏正则化和交替方向乘法器方法(中文),Sci。罪。数学。,2018, 48(03):457-470. ·Zbl 1499.86014号
[34] 吴忠,李明,王丹,韩丹,可分离非凸极小化问题的对称交替方向乘子方法,亚太地区。《运营杂志》。决议,2017,34(06):1750030·Zbl 1383.90028号
[35] 徐忠,常欣,徐芳,等,l\(_
[36] Yang L.,Luo J.,Xu Y.,et al.,一种基于碳排放交易的DC-DOPF分区的分布式双共识ADMM,IEEE T.Ind.Inform。,2020, 16(3):1858-1872.
[37] 杨伟,韩德,一类凸优化问题交替方向乘子法的线性收敛性,SIAM J.Numer。分析。,2016, 54(2):625-640. ·Zbl 1342.90138号
[38] 曾杰,方杰,徐忠,基于l\(_)的稀疏SAR成像·Zbl 1270.94025号
[39] Zhu M.,Mihic K.,Ye Y.,关于解决选定机器学习问题的随机多块ADMM,arXiv:1907.01995,2019。
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。