×

稀疏线性反问题的基于重球的最优阈值算法。 (英语) Zbl 1519.94010号

概述:线性逆问题在各种工程领域都会出现,尤其是在信号和图像重建中。稀疏线性反问题计算方法的发展是该领域的最新发展趋势之一。所谓最优(k)-阈值法是一种新引入的求解稀疏优化和线性反问题的方法。与其他稀疏性感知算法相比,最优\(k\)-阈值方法的优点在于它同时执行阈值和误差度量减少,因此对于解决中等规模的线性逆问题稳定而稳健。然而,当问题规模较大时,这种方法的运行时间通常较高。本文的目的是为这种方法提出一种加速策略。具体来说,我们针对稀疏线性反问题提出了一种基于重排的最优(k)-阈值算法及其放松变量。这些算法的收敛性在受限等距性质下得到了证明。此外,还对基于重锤的松弛最优阈值追踪算法(HBROTP)的数值性能进行了评估,仿真表明,即使在噪声环境中,HBROTP也具有信号和图像重建的鲁棒性。

MSC公司:

94甲12 信号理论(表征、重建、滤波等)
94A08型 信息与通信理论中的图像处理(压缩、重建等)
15A29号 线性代数中的反问题
90C25型 凸面编程
90C20个 二次规划
49平方米 松弛型数值方法
PDF格式BibTeX公司 XML格式引用

参考文献:

[1] 阿洛塔比,M。;布奇尼,A。;Reichel,L.,Krylov子空间分裂Bregman方法,应用。数字。数学。,184, 371-390 (2023) ·Zbl 07630340号 ·doi:10.1016/j.apnum.2022.10.009
[2] 安德森,E.D。;Andersen,K.D.,《线性规划的MOSEK内点优化器:齐次算法的实现》。《高性能优化》,197-232(2000),马萨诸塞州波士顿市:斯普林格·Zbl 1028.90022号
[3] JF奥约尔;剂量,C。;Rondepierre,A.,重球法在Łojasiewicz性质下的收敛速度,数学。掠夺。,198, 195-254 (2023) ·Zbl 07658250号 ·doi:10.1007/s10107-022-01770-2
[4] 贝克,A。;Teboulle,M.,线性反问题的快速迭代收缩阈值算法,SIAM J.Imag。科学。,2, 1, 183-202 (2009) ·Zbl 1175.94009号 ·doi:10.1137/080716542
[5] JD布兰查德;Tanner,J.,压缩感知中贪婪算法的性能比较,Numer。线性代数应用。,22, 2, 254-282 (2015) ·Zbl 1363.94017号 ·doi:10.1002/nla.1948年
[6] JD布兰查德;Tanner,J。;Wei,K.,CGIHT:用于压缩传感和矩阵完成的共轭梯度迭代硬阈值,IMA J.Inf.Inference,4,4,289-327(2015)·Zbl 1380.94045号
[7] Blumensath,T.,加速迭代硬阈值,信号处理。,92, 3, 752-756 (2012) ·doi:10.1016/j.sigpro.2011.09.017
[8] Blumensath,T。;Davies,ME,稀疏近似的迭代阈值,J.Fourier Ana。申请。,14, 629-654 (2008) ·Zbl 1175.94060号 ·doi:10.1007/s00041-008-9035-z
[9] Blumensath,T。;Davies,ME,归一化迭代硬阈值:保证稳定性和性能,IEEE J.Sel。顶部。信号处理。,4, 2, 298-309 (2010) ·doi:10.1109/JSTSP.2010.2042411
[10] 博格丁,M。;Schniter,P。;Rangan,S.,AMP-激励深度网络用于稀疏线性逆问题,IEEE Trans。信号处理。,65, 16, 4293-4308 (2017) ·Zbl 1414.94083号 ·doi:10.1109/TSP.2017.2708040
[11] 布奇尼,A。;帕夏,M。;Reichel,L.,带非负约束的线性化Krylov子空间Bregman迭代,Numer。阿尔戈。,87, 1177-1200 (2021) ·Zbl 1470.65049号 ·doi:10.1007/s11075-020-01004-6
[12] Buchheim,C。;Traverse,E.,使用可分离低估值的二次组合优化,INFORMS J.Comput。,30, 3, 424-437 (2018) ·Zbl 1528.90208号 ·doi:10.1287/ijoc.2017.0789
[13] 蔡,Y。;多纳泰利,M。;Bianchi,D。;黄,TZ,用于减少边界伪影的基于帧的图像去模糊的正则化预处理,SIAM J.Sci。计算。,38、1、B164-B189(2016)·Zbl 1382.94010号 ·数字对象标识代码:10.1137/140976261
[14] 坎迪斯,EJ;Tao,T.,线性规划解码,IEEE Trans。通知。理论,51,12,4203-4215(2005)·Zbl 1264.94121号 ·doi:10.1109/TIT.2005.858979
[15] 坎迪斯,EJ;Wakin,MB;Boyd,SP,通过重加权最小化增强稀疏性,J.Fourier Ana。申请。,14, 877-905 (2008) ·Zbl 1176.94014号 ·doi:10.1007/s00041-008-9045-x
[16] Chaovaltwongse,W.A.,Androulakis,I.P.,Pardalos,P.M.:二次整数规划:复杂性和等价形式。In:Floudas C.A.,Pardalos P.M.:(编辑)最优化百科全书。马萨诸塞州波士顿斯普林格(2008)
[17] Chartrand,R.,通过非凸最小化精确重建稀疏信号,IEEE信号处理。莱特。,14, 10, 707-710 (2007) ·doi:10.1109/LSP.2007.898300
[18] 陈,SS;多诺霍,DL;Saunders,MA,通过基追踪进行原子分解,SIAM J.Sci。计算。,20, 1, 33-61 (1998) ·Zbl 0919.94002号 ·doi:10.1137/S1064827596304010
[19] Chen,W。;张,B。;Jin,S。;艾,B。;Zhong,Z.,《通信系统中稀疏线性逆问题的求解:具有自适应深度的深度学习方法》,IEEE J.Sel。地区公社。,39, 1, 4-17 (2021) ·doi:10.1109/JSAC.2020.3036959
[20] Dai,W。;Milenkovic,O.,压缩传感信号重建的子空间追踪,IEEE Trans。通知。理论,55,5,2230-2249(2009)·Zbl 1367.94082号 ·doi:10.1109/TIT.2009.2016006
[21] Daubechies,I。;Defrise,M。;De,Mol C.,具有稀疏约束的线性反问题的迭代阈值算法,Comm.Pure Appl。数学。,57, 11, 1413-1457 (2004) ·Zbl 1077.65055号 ·doi:10.1002/cpa.20042
[22] Donoho,DL,《软阈值去噪》,IEEE Trans。通知。理论,41,3,613-627(1995)·Zbl 0820.62002号 ·doi:10.1109/18.382009年
[23] 多诺霍,DL;Johnstone,IM,通过小波收缩实现理想的空间自适应,Biometrika,81,3,425-455(1994)·Zbl 0815.62019号 ·doi:10.1093/biomet/81.3.425
[24] Elad,M.,为什么简单收缩仍然与冗余表示相关?,IEEE传输。通知。理论,52,12,5559-5569(2006)·Zbl 1309.94035号 ·doi:10.1109/TIT.2006.885522
[25] Elad,M.,《稀疏和冗余表示:从理论到信号和图像处理应用》(2010),纽约:Springer,纽约·Zbl 1211.94001号 ·doi:10.1007/978-1-4419-7011-4
[26] Eldar,YC;Kutyniok,G.,《压缩传感:理论与应用》(2012),剑桥:剑桥大学出版社,剑桥·doi:10.1017/CBO9780511794308
[27] Foucart,S.,《硬阈值追踪:压缩传感算法》,SIAM J.Numer。分析。,49, 6, 2543-2563 (2011) ·Zbl 1242.65060号 ·数字对象标识代码:10.1137/100806278
[28] 福卡特,S。;Rauhut,H.,《压缩传感数学导论》(2013),纽约:Springer,纽约·Zbl 1315.94002号 ·doi:10.1007/978-0-8176-4948-7
[29] Golub,生长激素;Van Loan,CF,矩阵计算(2013),巴尔的摩:约翰斯·霍普金斯大学出版社,巴尔的摩·Zbl 1268.65037号 ·doi:10.56021/9781421407944
[30] Grant,M.,Boyd,S.:CVX:用于严格凸规划的matlab软件。1.21版(2017)
[31] Gürbüzbalaban,M。;Ozdaglar,A。;帕里洛,PA,关于增量聚合梯度算法的收敛速度,SIAM J.Opt。,27, 2, 1035-1048 (2017) ·Zbl 1366.90195号 ·doi:10.1137/15M1049695
[32] 北库鲁。;Birbil(伊利诺伊州)。;Gürbüzbalaban,M。;Yildirim,S.,《不同私有加速优化算法》,SIAM J.Opt。,32, 2, 795-821 (2022) ·Zbl 07534674号 ·doi:10.1137/20M1355847
[33] 基里利迪斯,A。;Cevher,V.,《硬阈值方法的矩阵配方》,J.Math。图像。视觉。,48, 235-265 (2014) ·Zbl 1311.90141号 ·doi:10.1007/s10851-013-0434-7
[34] Lessard,L。;Recht,B。;Packard,A.,通过积分二次约束分析和设计优化算法,SIAM J.Opt。,26, 1, 57-95 (2016) ·Zbl 1329.90103号 ·数字对象标识代码:10.1137/15M1009597
[35] 李,S。;阿明,M。;赵,G。;Sun,H.,《结合MRF聚类优先的稀疏优化雷达成像》,IEEE Geosci。遥感快报。,17, 7, 1139-1143 (2020) ·doi:10.1109/LGRS.2019.2943937
[36] 李,H。;Cheng,H。;Wang,Z。;Wu,GC,分布式Nesterov梯度和重球双加速异步优化,IEEE Trans。神经网络。学习。系统。,32, 12, 5723-5737 (2021) ·doi:10.1109/TNNLS.2020.3027381
[37] 刘,Y。;詹,Z。;蔡,JF;郭,D。;陈,Z。;Qu,X.,压缩传感磁共振成像中紧帧的投影迭代软阈值算法,IEEE Trans。医学图像。,35, 9, 2130-2140 (2016) ·doi:10.1109/TMI.2016.2550080
[38] 孟,N。;Zhao,YB,基于Newton的稀疏信号恢复硬阈值算法,IEEE Trans。信号处理。,68, 6594-6606 (2020) ·Zbl 07591199号 ·doi:10.1109/TSP.2020.3037996
[39] Meng,N。;赵,YB,牛顿型稀疏优化问题的最优阈值算法,J.Oper。中国皇家学会,10447-469(2022)·Zbl 1513.90181号 ·doi:10.1007/s40305-021-00370-9
[40] Meng,N。;YB赵;科奇瓦拉,M。;Sun,ZF,一类稀疏优化问题的部分梯度最优阈值算法,J.Global Opt。,84, 393-413 (2022) ·Zbl 1501.90076号 ·doi:10.1007/s10898-022-01143-1
[41] Mohammadi,H。;拉扎维亚因,M。;Jovanović,MR,强凸优化问题一阶加速算法的鲁棒性,IEEE Trans。自动。控制,66,6,2480-2495(2021)·Zbl 1467.93334号 ·doi:10.1109/TAC.2020.3008297
[42] Needell,D。;Tropp,JA,CoSaMP:不完整和不准确样本的迭代信号恢复,应用。计算。哈蒙。分析。,26, 3, 301-321 (2009) ·Zbl 1163.94003号 ·doi:10.1016/j.acha.2008.07.002
[43] Oymak,S。;Recht,B。;Soltanolkotabi,M.,线性反问题的夏普时间数据权衡,IEEE Trans。通知。理论,64,6,4129-4158(2018)·Zbl 1395.90205号 ·doi:10.10109/TIT.2017.2773497
[44] Polyak,BT,《加速迭代法收敛的一些方法》,苏联计算机。数学。数学。物理。,4, 5, 1-17 (1964) ·Zbl 0147.35301号 ·doi:10.1016/0041-5553(64)90137-5
[45] Schniter P.、Potter L.C.、Ziniel J.:快速贝叶斯匹配追踪。In:程序。通知。理论应用。326-333车间(2008)
[46] Sun,采埃孚;周,JC;YB赵;Meng,N.,《稀疏信号恢复的基于重球的硬阈值算法》,J.Compute。申请。数学。,430 (2023) ·Zbl 1520.94023号 ·doi:10.1016/j.cam.2023.115264
[47] 蒂尔,T。;Giryes,R.,不适定线性反问题基于反向投影的保真度项,IEEE Trans。图像处理。,29, 6164-6179 (2020) ·Zbl 07586316号 ·doi:10.1109/TIP.2020.2988779
[48] JA特罗普;Gilbert,AC,通过正交匹配追踪从随机测量中恢复信号,IEEE Trans。通知。理论,53,12,4655-4666(2007)·Zbl 1288.94022号 ·doi:10.1109/TIT.2007.909108
[49] Tropp J.A.,Wright S.J.:线性反问题稀疏解的计算方法。In:程序。IEEE 98(6),948-958(2010)
[50] 乌格里诺夫斯基,V。;彼得森,IR;Shames,I.,一类非凸优化问题重球方法的全局收敛性和渐近最优性,IEEE控制系统。莱特。,6, 2449-2454 (2022) ·doi:10.1109/LCSYS.2022.3163408
[51] 擦拭,DP;Rao,BD,基础选择的稀疏贝叶斯学习,IEEE Trans。信号处理。,52, 8, 2153-2164 (2004) ·兹比尔1369.94318 ·doi:10.1109/TSP.2004.831016
[52] Xiang,J。;Dong,Y。;Yang,Y.,FISTA-net:学习成像逆问题的快速迭代收缩阈值网络,IEEE Trans。医学图像。,40, 5, 1329-1339 (2021) ·doi:10.1109/TMI.2021.3054167
[53] Xin,R。;Khan,UA,《分布式重锤:梯度跟踪一阶方法的推广和加速》,IEEE Trans。自动。控制,65,6,2627-2633(2020)·兹比尔07256374 ·doi:10.10109/TAC.2019.2942513
[54] 尹,W。;Osher,S。;Goldfarb,D。;Darbon,J.,Bregman迭代算法用于压缩传感的(ell_1)最小化,SIAM J.Imag。科学。,1, 1, 143-168 (2008) ·Zbl 1203.90153号 ·doi:10.1137/070703983
[55] Yin,W.,线性化Bregman方法的分析和推广,SIAM J.Imag。科学。,3, 4, 856-877 (2010) ·兹比尔1211.68491 ·数字对象标识代码:10.1137/090760350
[56] 赵,YB,稀疏优化问题的最优阈值算法,SIAM J.Opt。,30, 1, 31-55 (2020) ·Zbl 1435.90113号 ·doi:10.1137/18M1219187
[57] YB赵;Luo,ZQ,构建多面体集最稀疏点的新重加权(ell_1)算法,数学。操作。第42号、第1号、第57-76号决议(2017年)·Zbl 1359.90072号 ·doi:10.1287/门.2016.0791
[58] YB赵;罗志强,压缩感知最优阈值算法分析,信号处理。,187 (2021) ·doi:10.1016/j.sigpro.2021.108148
[59] YB赵;Luo,ZQ,稀疏信号恢复的自然阈值算法,IEEE Open J.signal Process。,3, 417-431 (2022) ·doi:10.1109/OJSP.2022.3195115
[60] YB赵;Luo,ZQ,两种压缩感知算法保证性能的基于RIP的改进边界,Sci。中国数学。,66, 5, 1123-1140 (2023) ·Zbl 1518.90111号 ·doi:10.1007/s11425-021-1987-2
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。