×

非线性贝叶斯反问题的证明降维。 (英语) Zbl 07541892号

摘要:我们提出了一种针对具有非线性前向算子、非高斯先验和非高斯观测噪声的贝叶斯反问题的降维技术。似然函数由一个岭函数近似,即一个仅依赖于参数的几个线性组合的映射。我们通过最小化后验分布与其近似之间的Kullback-Leibler发散的上界来建立这种脊近似。这个界是通过对数Sobolev不等式获得的,允许人们证明后验近似的误差。计算界限需要计算对数似然函数梯度的二阶矩矩阵。实际上,需要基于样本的上限近似值。我们提供了一种分析,能够控制由于这种采样而产生的后验近似误差。与现有方法的数值和理论比较说明了该方法的优点。

MSC公司:

62C10个 贝叶斯问题;贝叶斯过程的特征
91G60型 数值方法(包括蒙特卡罗方法)
41-02 与近似和展开有关的研究说明(专著、调查文章)
PDF格式BibTeX公司 XML格式引用

参考文献:

[1] Agapiou,S.,重要性抽样:内在维度和计算成本,统计学。科学。,405-431 (2017) ·Zbl 1442.62026号 ·doi:10.1214/17-STS611
[2] Atchad’{e},Yves F.,具有截断漂移的Metropolis调整Langevin算法的自适应版本,Methodol。计算。申请。概率。,235-254 (2006) ·Zbl 1104.65004号 ·doi:10.1007/s11009-006-8550-0
[3] 巴克利·D·S{e} 米奈尔去概率\'{e} 秒1983/84年第十九期。扩散超压缩,数学课堂笔记。,177-206(1985),柏林斯普林格·Zbl 0561.60080号 ·doi:10.1007/BFb0075847
[4] Bakry,Dominique,《马尔可夫扩散算子的分析与几何》,Grundlehren der mathematischen Wissenschaften[数学科学基本原理],xx+552 pp.(2014),Springer,Cham·Zbl 1376.60002号 ·doi:10.1007/978-3-319-00227-9
[5] Arindam Banerjee,《作为Bregman预测器的条件期望的最优性》,IEEE Trans。通知。理论,2664-2669(2005)·Zbl 1284.94025号 ·doi:10.1109/TIT.2005.850145
[6] Beskos,Alexandros,《多层序贯蒙特卡罗与维度相关的类似信息建议》,SIAM/ASA J.Uncertain。数量。,762-786 (2018) ·Zbl 1395.82229号 ·doi:10.137/17M1120993
[7] G.Blanchard、O.Bousquet和L.Zwald,核主成分分析的统计特性,马赫数。学习。66(2007),第2-3、259-294号·Zbl 1470.62077号
[8] Bobkov,S.G.,《从Brunn-Minkowski到Brascamp-Lieb和对数Sobolev不等式》,Geom。功能。分析。,1028-1052 (2000) ·Zbl 0969.26019号 ·doi:10.1007/PL00001645
[9] Boucheron,圣{e} 显影《浓度不平等》,x+481页(2013),牛津大学出版社,牛津·Zbl 1337.60003号 ·doi:10.1093/acprof:oso/9780199535255.001.0001
[10] M.Brennan、D.Bigoni、O.Zahm、A.Spantini和Y.Marzouk,利用结构扩展惰性映射进行贪婪推断,高级。神经信息。过程。系统。33 (2020).
[11] Chen,Yuxin,加速维度依赖适应性都市,SIAM J.Sci。计算。,S539-S565(2016)·Zbl 1352.65029号 ·数字对象标识代码:10.1137/15M1026432
[12] J.Andr Christen’{e} 秒《使用近似的马尔可夫链蒙特卡罗法》,J.Compute。图表。统计人员。,795-810 (2005) ·doi:10.1198/106186005X76983
[13] Cohen,Albert,从点查询捕获高维脊函数,Constr。约225-243(2012年)·Zbl 1318.62286号 ·doi:10.1007/s00365-011-9147-6
[14] Conrad,Patrick R.,通过局部近似加速计算密集型模型的渐近精确MCMC,J.Amer。统计师。协会,1591-1607(2016)·doi:10.1080/01621459.2015.1096787
[15] Constantine,Paul G.,《理论和实践中的主动子空间方法:克里金曲面的应用》,SIAM J.Sci。计算。,A1500-A1524(2014)·兹比尔1311.65008 ·数字对象标识代码:10.1137/130916138
[16] Constantine,Paul G.,《利用有源子空间加速马尔可夫链蒙特卡罗》,SIAM J.Sci。计算。,A2779-A2805(2016)·Zbl 1348.65010号 ·doi:10.1137/15M1042127
[17] T.Cui、C.Fox和M.O'Sullivan,通过新的自适应延迟接受Metropolis Hastings算法Water Resour对大型地热储层模型进行贝叶斯校准。物件。47(2011),第10期,W10521。
[18] 崔天刚,延迟可接受MCMC中简化模型的后验随机校正,及其在多相地下反演问题中的应用,国际。J.数字。方法工程师,578-605(2019)·doi:10.1002/nme.6028
[19] T.Cui、S.Dolgov和O.Zahm,条件深逆Rosenblatt运输,预印本,2106.041702021。
[20] Cui、Tiangang、Dimension-independent likelihood通知MCMC、J.Compute。物理。,109-137 (2016) ·Zbl 1349.65009号 ·doi:10.1016/j.jcp.2015.10.008
[21] Cui,T.,《非线性反问题的似然维数缩减》,反问题,11401528页(2014)·Zbl 1310.62030 ·doi:10.1088/0266-5611/30/11/114015
[22] 崔天刚,通过似然参数和状态约简实现大规模贝叶斯反问题的可缩放后验近似,J.Compute。物理。,363-387 (2016) ·Zbl 1349.65189号 ·doi:10.1016/j.jcp.2016.03.055
[23] 崔天刚,逆向问题贝叶斯解的数据驱动模型约简,国际。J.数字。方法工程,966-990(2015)·兹比尔1352.65445 ·doi:10.1002/nme.4748
[24] 崔天刚,贝叶斯反问题的无数据似然信息降维,反问题,论文编号045009,41页(2021)·Zbl 1464.62239号 ·doi:10.1088/1361-6420/abeafb
[25] Del Moral,Pierre,顺序蒙特卡罗采样器,J.R.Stat.Soc.Ser。B统计方法。,411-436 (2006) ·Zbl 1105.62034号 ·文件编号:10.1111/j.1467-9868.2006.00553.x
[26] Duane、Simon、Hybrid Monte Carlo和Phys。莱特。B、 216-222(1987)·doi:10.1016/0370-2693(87)91197-x
[27] Flath,H.P.,基于低阶部分Hessian近似的大规模线性反问题中贝叶斯不确定性量化的快速算法,SIAM J.Sci。计算。,407-432 (2011) ·Zbl 1229.65174号 ·数字对象标识代码:10.1137/090780717
[28] Fornasier,Massimo,高维中少数任意线性参数的学习函数,Found。计算。数学。,229-262 (2012) ·Zbl 1252.65036号 ·doi:10.1007/s10208-012-9115-y
[29] Girolma,Mark,Riemann流形Langevin和Hamilton Monte Carlo方法,J.R.Stat.Soc.Ser。B统计方法。,123-214 (2011) ·Zbl 1411.62071号 ·文件编号:10.1111/j.1467-9868.2010.00765.x
[30] Gozlan,N.,度量空间中Talagrand输运不等式的特征,Ann.Probab。,3112-3139 (2013) ·Zbl 1283.60029号 ·doi:10.1214/12-AOP757
[31] Gross,Leonard,对数Sobolev不等式,Amer。数学杂志。,1061-1083 (1975) ·Zbl 0318.46049号 ·doi:10.2307/2373688
[32] 吉奥内特,A.,S\'{e} 米奈尔去概率\'{e} 秒,第三十六页。对数索波列夫不等式讲座,数学课堂讲稿。,柏林斯普林格1-134(2003)·兹比尔1125.60111 ·doi:10.1007/978-3-540-36107-7\_1
[33] Haario,H.,《遥感高维反演的马尔可夫链蒙特卡罗方法》,J.R.Stat.Soc.Ser。B统计方法。,591-607 (2004) ·Zbl 1098.86503号 ·doi:10.1111/j.1467-9868.2004.02053.x
[34] Haario,Heikki,自适应大都会算法,伯努利,223-242(2001)·Zbl 0989.65004号 ·doi:10.2307/3318737
[35] 马修·霍夫曼(Matthew D.Hoffman),《无转取样器:哈密尔顿蒙特卡罗(J.Mach)自适应设置路径长度》。学习。1593-1623号决议(2014年)·Zbl 1319.60150号
[36] Holley,Richard,对数Sobolev不等式和随机Ising模型,J.Statist。物理。,1159-1194 (1987) ·Zbl 0682.60109号 ·doi:10.1007/BF01011161
[37] Jung、Heinrich、Ueber die kleinste Kugel、die eine r{a} 乌姆利希Figur einschliesst,J.Reine Angew。数学。,241-257 (1901) ·doi:10.1515/crll.1901.123.241
[38] Kaipio,Jari,《统计和计算反问题》,应用数学科学,xvi+339 pp.(2005),纽约斯普林格-Verlag·Zbl 1068.65022号
[39] Kallenberg,Olav,《现代概率论基础、概率论及其应用》(纽约),xii+523页(1997),Springer Verlag,纽约·Zbl 0892.60001号
[40] Kokiopoulou,E.,《降维方法中的轨迹优化和特征问题》,数值。线性代数应用。,565-602 (2011) ·Zbl 1249.65075号 ·doi:10.1002/nla.743
[41] Solomon Kullback,《信息理论与统计》,xvi+399页(1997),多佛出版公司,纽约州米诺拉·Zbl 0897.62003号
[42] Lamminp\“{a}\”{a},Otto,2017矩阵年鉴。大气成分剖面遥感的似然知情降维,MATRIX Book Ser。,65-78(2019),查姆斯普林格
[43] 米歇尔·勒杜克斯{e} 米奈尔去概率\'{e} 秒,三十三。测量集中和对数Sobolev不等式,数学课堂讲稿。,120-216(1999),柏林斯普林格·Zbl 0957.60016号 ·doi:10.1007/BFb0096511
[44] 李景来,关于无穷维贝叶斯反问题的Karhunen-Lo eve展开的注记,统计。普罗巴伯。莱特。,1-4 (2015) ·Zbl 1398.62064号 ·doi:10.1016/j.spl.2015.06.025
[45] W.Li和O.A。Cirpka,《结构化和非结构化网格的高效地质统计反演方法》,《水资源》。物件。42(2006),第6期。
[46] Chad Lieberman,《大规模统计反问题的参数和状态模型简化》,SIAM J.Sci。计算。,2523-2542 (2010) ·Zbl 1217.65123号 ·doi:10.1137/090775622
[47] Lindgren,Finn,《高斯场和高斯-马尔可夫随机场之间的明确联系:随机偏微分方程方法》,J.R.Stat.Soc.Ser。B统计方法。,423-498 (2011) ·Zbl 1274.62360号 ·文件编号:10.1111/j.1467-9868.2011.00777.x
[48] Manzoni,A.,结合约化基方法和约化误差模型的贝叶斯逆不确定性量化问题的精确解,SIAM/ASA J.不确定性。数量。,380-412 (2016) ·Zbl 1383.35251号 ·doi:10.1137/140995817
[49] Marzouk,Youssef M.,反问题中贝叶斯推理的维数减少和多项式混沌加速,J.Compute。物理。,1862-1902 (2009) ·Zbl 1161.65308号 ·doi:10.1016/j.jcp.2008.11.024
[50] Neal,Radford M.,《马尔可夫链蒙特卡罗手册》。MCMC使用哈密顿动力学,查普曼和霍尔/CRC Handb。国防部。《统计方法》,113-162(2011),佛罗里达州博卡拉顿CRC出版社·Zbl 1229.65018号
[51] Otto,F.,Talagrand对不等式的推广以及与对数Sobolev不等式的联系,J.Funct。分析。,361-400 (2000) ·Zbl 0985.58019号 ·doi:10.1006/jfan.1999.3557
[52] 答:B。欧文,《蒙特卡罗理论、方法和实例》,2013年。可在https://artowen.su.domains/mc/。
[53] Pinkus,Allan,Ridge Functions,《剑桥数学丛书》,x+207页(2015),剑桥大学出版社,剑桥·Zbl 1331.41001号 ·doi:10.1017/CBO9781316408124
[54] Reiss,Markus,PCA重构误差的非渐近上界,Ann.Statist。,1098-1123 (2020) ·Zbl 1450.62070号 ·doi:10.1214/19-AOS1839
[55] Robert,Christian P.,《蒙特卡洛统计方法》,Springer Texts in Statistics,xxii+507页(1999年),Springer Verlag,纽约·Zbl 0935.62005号 ·doi:10.1007/978-1-4757-3071-5
[56] Rothaus,O.S.,正则Sturm-Liouville算子特征值的下界和对数Sobolev不等式,Duke Math。J.,351-362(1978)·Zbl 0435.47049号
[57] Rubio,Paul-Baptiste,耦合贝叶斯推理和PGD模型约简的快速模型更新,计算。机械。,1485-1509 (2018) ·Zbl 1469.74121号 ·doi:10.1007/s00466-018-1575-8
[58] Russi,Trent Michael,《实验数据和复杂系统模型的不确定性量化》,176页(2010),ProQuest LLC,密歇根州安阿伯
[59] Claudia Schillings,《关于贝叶斯反问题基于拉普拉斯的蒙特卡罗方法的拉普拉斯近似收敛性和噪声级鲁棒性》,Numer。数学。,915-971 (2020) ·Zbl 1446.65098号 ·doi:10.1007/s00211-020-01131-1
[60] 斯潘蒂尼,阿莱西奥,贝叶斯线性逆问题的最优低阶近似,SIAM J.Sci。计算。,A2451-A2487(2015)·Zbl 1325.62060号 ·数字对象标识代码:10.1137/140977308
[61] Stuart,A.M.,《逆向问题:贝叶斯观点》,《数值学报》。,451-559 (2010) ·Zbl 1242.65142号 ·doi:10.1017/S0962492910000061
[62] J.Tamminen,《地球物理应用的自适应马尔可夫链蒙特卡罗算法》,赫尔辛基大学数学系科学系博士论文,2004年。
[63] Tyagi,Hemant,通过低秩方法从点查询中学习非参数基独立模型,应用。计算。哈蒙。分析。,389-412 (2014) ·Zbl 1373.68336号 ·doi:10.1016/j.acha.2014.01.002
[64] Vershynin,Roman,压缩传感。随机矩阵非渐近分析导论,210-268(2012),剑桥大学出版社,剑桥
[65] Zahm,Olivier,多元向量值函数的基于梯度的降维,SIAM J.Sci。计算。,A534-A558(2020)·Zbl 1433.41007号 ·doi:10.1137/18M1221837
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。