×

高维曲面和函数的恢复:采样理论和神经网络链接。 (英语) Zbl 1479.94093号

包括基于补丁的图像去噪、图像时间序列恢复和卷积神经网络在内的几种成像算法可以被认为是利用信号的流形结构的方法。虽然这些算法的经验性能令人印象深刻,但对流形上信号和函数的恢复的理解却很少。
本文讨论了曲面并集上的信号恢复问题。特别地,我们考虑了高维光滑带线表面上的信号。如本文所示,指数映射将数据转换为低维子空间的并集。然后,介绍了一种通过学习光滑曲面上的函数从少量样本中恢复光滑曲面的采样理论框架。恢复曲面所需的测量次数由特征的低阶特性确定。这种低秩特性还提供了一种类似于神经网络的有效方法,用于在曲面上局部表示多维函数。此外,它可以显著减少参数的数量,这使得计算结构对于从有限的标记训练数据进行学习和推理具有吸引力。将该理论应用于图像去噪。

理学硕士:

94A20型 信息与传播理论中的抽样理论
94甲12 信号理论(表征、重建、滤波等)
94A08型 信息与通信理论中的图像处理(压缩、重建等)
42B05型 傅里叶级数和多变量系数
65T40型 三角逼近和插值的数值方法
68T07型 人工神经网络与深度学习
PDF格式BibTeX公司 XML格式引用

参考文献:

[1] H.K.Aggarwal、M.P.Mani和M.Jacob,《模型:基于模型的反问题深度学习体系结构》,IEEE Trans。医学成像,38(2018),第394-405页。
[2] M.Atiyah和I.MacDonald,交换代数导论,Addison-Wesley Ser。数学。,Addison-Wesley,马萨诸塞州雷丁,1994年·Zbl 0175.03601号
[3] M.Belkin、P.Niyogi和V.Sindhwani,流形正则化:从标记和未标记示例学习的几何框架,J.Mach。学习。Res.,7(2006),第2399-2434页·Zbl 1222.68144号
[4] O.Bernard,D.Friboulet,P.Theávenaz,M.Unser,《变分b样条水平集:快速变形模型演化的线性滤波方法》,IEEE Trans。图像处理。,第18页(2009年),第1179-1191页·Zbl 1371.94052号
[5] A.Buades、B.Coll和J.-M.Morel,非局部意味着去噪,图像处理。在线,1(2011),第208-212页。
[6] Y.Cho和L.K.Saul,深度学习的核心方法,《神经信息处理系统进展》,Curran Associates,Red Hook,纽约,2009年,第342-350页。
[7] K.Dabov,A.Foi,V.Katkovnik,and K.Egiazarian,《带块匹配和3D滤波的图像去噪》,载于《图像处理:算法和系统、神经网络和机器学习》,N.M.Nasrabadi,S.A.Rizvi,E.R.Dougherty,J.T.Astola,and K.O.Egiasarian,eds.,Proc。SPIE 6064,SPIE,比林汉姆,华盛顿州,2006年,第354-365页,https://doi.org/10.1117/12.643267。
[8] M.Elad和M.Aharon,通过学习词典上的稀疏和冗余表示进行图像去噪,IEEE Trans。图像处理。,15(2006年),第3736-3745页。
[9] H.Federer,《几何测量理论》,施普林格出版社,柏林,2014年·Zbl 0874.49001号
[10] C.Fefferman、S.Mitter和H.Narayanan,《检验流形假设》,J.Amer。数学。Soc.,29(2016),第983-1049页·Zbl 1359.62122号
[11] M.Fornasier、H.Rauhut和R.Ward,通过迭代加权最小二乘最小化恢复低秩矩阵,SIAM J.Optim。,21(2011),第1614-1640页·Zbl 1236.65044号
[12] V.Gallese,《移情的根源:共有多种假设和主体间性的神经基础》,《精神病理学》,36(2003),第171-180页。
[13] K.Gedalyahu和Y.C.Eldar,低速率样本的时间延迟估计:子空间联合方法,IEEE Trans。信号处理。,58(2010),第3017-3031页·Zbl 1392.94712号
[14] R.C.Gunning和H.Rossi,《多个复变量的分析函数》,AMS Chelsea Publishing 368,美国数学学会,普罗维登斯,RI,2009年·Zbl 1204.01045号
[15] T.Hastie、R.Tibshirani、J.Friedman和J.Franklin,《统计学习的要素:数据挖掘、推理和预测》,数学。Intelligencer,27(2005),第83-85页。
[16] A.S.Jackson、A.Bulat、V.Argyriou和G.Tzimiropoulos,通过直接体积CNN回归从单个图像进行大姿态三维人脸重建,《IEEE计算机视觉国际会议论文集》,IEEE计算机学会,加利福尼亚州洛斯阿拉米托斯,2017年,第1031-1039页。
[17] M.Jacob、T.Blu和M.Unser,参数蛇的有效能量和算法,IEEE Trans。图像处理。,13(2004),第1231-1244页。
[18] C.Koulamas和G.J.Kyparisis,具有一般学习功能的单机和双机流水车间调度,欧洲J.Oper。研究,178(2007),第402-407页·Zbl 1107.90018号
[19] Y.LeCun、C.Cortes和C.Burges,手写数字的MNIST数据库,ATT实验室,http://yann.lecun.com/exdb/mnist (2010).
[20] C.Li,C.Xu,C.Gui,和M.D.Fox,距离正则化水平集进化及其在图像分割中的应用,IEEE Trans。图像处理。,19(2010年),第3243-3254页·Zbl 1371.94226号
[21] T.Li、A.Krupa和C.Collewet,《基于傅立叶描述符的鲁棒参数主动轮廓》,2011年第18届IEEE国际图像处理会议,IEEE,皮斯卡塔韦,新泽西州,2011年,第1037-1040页。
[22] Y.M.Lu和M.N.Do,子空间并集信号采样理论,IEEE Trans。信号处理。,56(2008),第2334-2345页·Zbl 1390.94656号
[23] J.Mairal、P.Koniusz、Z.Harchaoui和C.Schmid,卷积核网络,《神经信息处理系统进展》,Curran Associates,Red Hook,NY,2014年,第2627-2635页。
[24] M.Mishali、Y.C.Eldar和A.J.Elron,Xampling:子空间联合中的信号采集和处理,IEEE Trans。信号处理。,59(2011),第4719-4734页·Zbl 1392.94342号
[25] K.Mohan和M.Fazel,矩阵秩最小化的迭代重加权算法,J.Mach。学习。研究,13(2012),第3441-3473页·Zbl 1436.65055号
[26] Y.Q.Mohsin、S.G.Lingala、E.DiBella和M.Jacob,使用补丁正则化进行隐式运动补偿的加速动态MRI,Magnet。共振医学,77(2017),第1238-1248页。
[27] K.-R.Muller、S.Mika、G.Ratsch、K.Tsuda和B.Scholkopf,基于内核的学习算法简介,IEEE Trans。神经网络。,12(2001),第181-201页。
[28] U.Nakarmi,Y.Wang,J.Lyu,D.Liang,and L.Ying,高加速动态MRI中基于核的低阶(KLR)模型,IEEE Trans。《医学成像》,36(2017),第2297-2307页。
[29] G.Ongie和M.Jacob,从少量傅里叶样本中分段常数图像的非网格恢复,SIAM J.成像科学。,9(2016),第1004-1041页·Zbl 1372.94198号
[30] G.Ongie、R.Willett、R.D.Nowak和L.Balzano,高秩矩阵完成的代数变化模型,Proc。机器。学习。研究(PMLR),70(2017),第2691-2700页。
[31] S.Osher和R.P.Fedkiw,水平集方法:概述和一些最新结果,J.Compute。物理。,169(2001),第463-502页·Zbl 0988.65093号
[32] H.Pan、T.Blu和P.L.Dragotti,有限创新率采样曲线,IEEE Trans。信号处理。,62(2013),第458-471页·Zbl 1394.94831号
[33] G.Peyreí和S.Mallat,带几何带的表面压缩,ACM Trans。图表。,24(2005),第601-608页。
[34] G.Pillonetto、F.Dinuzzo、T.Chen、G.De Nicolao和L.Ljung,《系统识别、机器学习和功能估计中的内核方法:一项调查》,Automatica J.IFAC,50(2014),第657-682页·Zbl 1298.93342号
[35] S.Poddar和M.Jacob,使用流形平滑正则化的动态MRI(风暴),IEEE Trans。《医学成像》,35(2015),第1106-1115页。
[36] S.Poddar和M.Jacob,《带限表面上噪声点的恢复:核心方法的重新解释》,2018年IEEE声学、语音和信号处理国际会议(ICASSP),IEEE,新泽西州皮斯卡塔韦,2018年,第4024-4028页。
[37] S.Poddar和M.Jacob,《表面点云的恢复:图像重建的应用》,IEEE第15届国际生物医学成像研讨会(ISBI 2018),IEEE,新泽西州皮斯卡塔韦,2018年,第1272-1275页。
[38] S.Poddar、Y.Q.Mohsin、D.Ansah、B.Thattaliyath、R.Ashwath和M.Jacob,使用核低阶正则化的流形恢复:动态成像的应用,IEEE Trans。计算。《成像》,第5期(2019年),第478-491页。
[39] D.Potts和G.Steidl,根据非标准采样Radon变换对函数进行傅里叶重建,J.Fourier Ana。申请。,8(2002),第513-534页·Zbl 1029.65140号
[40] M.Rauth和T.Strohmer,噪声散射数据位场的平滑近似,地球物理学,63(1998),第85-94页。
[41] S.Ravishankar和Y.Bresler,学习图像的双重稀疏变换,IEEE Trans。图像处理。,22(2013),第4598-4612页·Zbl 1373.94344号
[42] M.Rousson和N.Paragios,水平集表示的形状先验,《欧洲计算机视觉会议》,柏林斯普林格,2002年,第78-92页·Zbl 1039.68713号
[43] P.Sajda、A.Laine和Y.Zeevi,用于识别疾病特征的多分辨率和小波表示,《疾病标记》,18(2002),第339-363页。
[44] B.Scho¨lkopf和A.J.Smola,《使用内核学习:支持向量机、正则化、优化和超越》,麻省理工学院出版社,马萨诸塞州剑桥,2002年。
[45] F.Schroff、A.Criminisi和A.Zisserman,使用随机森林的对象类分割,收录于BMVC,达勒姆英国机器视觉协会和模式识别学会,英国达勒姆,2008年,第1-10页。
[46] H.Shao、A.Kumar和P.T.Fletcher,深度生成模型的黎曼几何,《IEEE计算机视觉和模式识别研讨会会议记录》,IEEE计算机学会,加利福尼亚州洛斯阿拉米托斯,2018年,第315-323页。
[47] A.J.Smola和R.Kondor,图的核与正则化,收录于《学习理论与核机器》,Springer出版社,2003年,第144-158页·兹比尔1274.68351
[48] T.Sörevik和M.A.Nome,《格子网格上的三角插值》,BIT,56(2016),第341-356页·Zbl 1341.65054号
[49] T.Strohmer,从不规则样本中重建带限图像的计算吸引力,IEEE Trans。图像处理。,6(1997年),第540-548页。
[50] T.Strohmer、T.Binder和M.Sussner,《如何恢复噪声医学图像中的平滑对象边界》,载于《第三届IEEE图像处理国际会议论文集》,第1卷,IEEE,新泽西州皮斯卡塔韦,1996年,第331-334页。
[51] C.Tian,Y.Xu,L.Fei,J.Wang,J.Wen,N.Luo,增强CNN图像去噪,CAAI Trans。智力。技术。,4(2019年),第17-23页。
[52] M.C.Tsakiris和R.Vidal,仿射子空间的代数聚类,IEEE Trans。模式分析。机器。智力。,40(2017年),第482-489页。
[53] Visionair公司,http://www.infra-visionair.eu/。
[54] S.Wang和M.Y.Wang,结构拓扑优化的径向基函数和水平集方法,国际。J.数字。方法工程,65(2006),第2060-2090页·兹比尔1174.74331
[55] F.Weisz,多维三角傅里叶级数的可和性,Surv。近似理论,7(2012),第1-179页·Zbl 1285.42010年4月
[56] Z.Yang和M.Jacob,反问题的非局部正则化:统一变分框架,IEEE Trans。图像处理。,22(2012),第3192-3203页。
[57] J.Zhang、G.G.Walter、Y.Miao和W.N.W.Lee,用于函数学习的小波神经网络,IEEE Trans。图像处理。,43(1995),第1485-1497页。
[58] K.Zhang、W.Zuo、Y.Chen、D.Meng和L.Zhang,超越高斯去噪器:用于图像去噪的深度CNN剩余学习,IEEE Trans。图像处理。,26(2017),第3142-3155页·兹比尔1409.94754
[59] Q.Zou和M.Jacob,高维表面采样和学习函数,摘自ICASSP 2020-2020 IEEE声学、语音和信号处理国际会议(ICASSP),IEEE,新泽西州皮斯卡塔韦,2020年,第8354-8358页。
[60] Q.Zou、S.Poddar和M.Jacob,《平面曲线采样:理论和快速算法》,IEEE Trans。信号处理。,67(2019年),第6455-6467页·Zbl 07160304号
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。