×

高维拉普拉斯近似精度的无因次非共振界。 (英语) Zbl 1527.62025号

小结:本文旨在以现代无因次无因次形式重温拉普拉斯近似的经典结果。这种扩展是为了应用于高维统计和优化问题。所建立的结果提供了根据所谓的有效尺寸\(\mathtt{p} G(_G)\). 该值被定义为数据中包含的信息和先前分布中的信息之间的相互作用。与著名的Bernstein-von Mises结果相反,先验的影响是不可忽略的,它允许人们保持有效维数较小或适中,即使真实参数维数很大。我们还解决了使用参数不精确的高斯近似的问题,重点是用后验均值替换最大后验(MAP)值,并设计基于拉普拉斯迭代的贝叶斯优化算法。结果指定为非线性回归的情况。

MSC公司:

2015年1月62日 贝叶斯推断
60埃15 不平等;随机排序
65二氧化碳 蒙特卡罗方法
65K10码 数值优化和变分技术

软件:

PRMLT公司
PDF格式BibTeX公司 XML格式引用

参考文献:

[1] Bandeira,A.S.、Maillard,A.、Nickl,R.和Wang,S.,《关于高斯先验中的自由能障碍和高维单峰分布MCMC的失效》,预印本,https://arxiv.org/abs/2209.02001, 2022.
[2] Bishop,C.M.,模式识别和机器学习,Springer,2006年·Zbl 1107.68072号
[3] Bochkina,N.A.和Green,P.J.,《伯恩斯坦-冯-米塞斯定理和非正则模型》,《统计年鉴》。,42(2014),第1850-1878页,doi:10.1214/14-AOS1239·Zbl 1305.62112号
[4] Bohr,J.和Nickl,R.,关于高维后验测度的对数凹近似和非线性反问题的稳定性,预印本,https://arxiv.org/abs/2105.07835, 2021.
[5] Dallayan,A.S.,《平滑密度和对数曲线密度近似采样的理论保证》,J.R.Stat.Soc.Ser。B统计方法。,79(2017),第651-676页,doi:10.1111/rssb.12183·Zbl 1411.62030号
[6] Devroye,L.、Mehrabian,A.和Reddad,T.,具有相同平均值的高维高斯函数之间的总变异距离,预印本,https://arxiv.org/abs/1810.08693, 2018.
[7] Durmus,A.和Moulines,E。,通过未调整的Langevin算法进行高维贝叶斯推断,Bernoulli,25(2019),第2854-2882页,doi:10.3150/18-BEJ1073·Zbl 1428.62111号
[8] Giordano,M.和Kekkonen,H.,Bernstein-von Mises定理和线性反问题的不确定性量化,SIAM/ASA J.不确定性。数量。,8(2020年),第342-373页,doi:10.1137/18M1226269·Zbl 1436.62161号
[9] Götze,F.,Naumov,A.,Spokoiny,V.和Ulyanov,V.,大球概率,高斯比较和反集中,伯努利,25(2019),第2538-2563页,doi:10.3150/18-BEJ1062·Zbl 1428.62187号
[10] Helin,T.和Kretschmann,R.,贝叶斯反问题中拉普拉斯近似的非症状误差估计,数值。数学。,150(2022),第521-549页,doi:10.1007/s00211-021-01266-9·Zbl 1523.47061号
[11] Inglot,T.和Majerski,P.,《多元拉普拉斯近似的简单上下限》,《J近似理论》,186(2014),第1-11页,doi:10.1016/J.jat.2014.06.011·Zbl 1333.41009号
[12] Łapiáski,T.M.,《带估计误差的多元拉普拉斯逼近及其在极限定理中的应用》,《近似理论》,248(2019),105305,doi:10.1016/J.jat.2019.105305·Zbl 1472.41016号
[13] Le Cam,L.,统计决策理论中的渐近方法,Springer-Verlag,1986年·Zbl 0605.62002号
[14] Lu,Y.,关于高维非线性贝叶斯反问题的Bernstein-von Mises定理,预印本,https://arxiv.org/abs/1706.00289, 2017.
[15] McClure,J.和Wong,R.,多维拉普拉斯近似的误差界,J.近似理论,37(1983),第372-390页,doi:10.1016/0021-9045(83)90044-8·Zbl 0514.41028号
[16] Monard,F.,Nickl,R.,Paternain,G.P.,《X射线变换的有效非参数贝叶斯推断》,《美国统计年鉴》,47(2019),第1113-1147页·Zbl 1417.62060号
[17] Nesterov,Y.和Spokoiny,V.,凸函数的随机无梯度最小化,Found。计算。数学。,17(2017),第527-566页,doi:10.1007/s10208-015-9296-2·Zbl 1380.90220号
[18] 统计反问题的Bernstein von Mises定理I:薛定谔方程,欧洲数学杂志。《社会学杂志》,22(2020),第2697-2750页·Zbl 1445.62099号
[19] Nickl,R.和Wang,S.,《利用Langevin型算法对高维后验测度进行多项式时间计算》,预印本,https://arxiv.org/abs/2009.05298, 2020.
[20] Olver,F.W.J.,定积分拉普拉斯近似的误差界,J.近似理论,1(1968),第293-313页,doi:10.1016/0021-9045(68)90007-5·Zbl 0187.10702号
[21] Olver,F.W.J.,《渐近与特殊函数》,学术出版社,1974年,doi:10.1016/C2013-0-11254-8·Zbl 0303.41035号
[22] Reich,S.,《使用集合卡尔曼滤波器进行稳健参数估计的常见观点》,预印本,https://arxiv.org/abs/2201.00611, 2022.
[23] Reich,S.和Rozdeba,P.J.,非参数状态和漂移估计的后验收缩率,Found。数据科学。,2(2020年),第333-349页,doi:10.3934/fods.2020016。
[24] Schillings,C.、Sprungk,B.和Wacker,P.,关于贝叶斯反问题基于拉普拉斯的蒙特卡罗方法的拉普拉斯近似收敛性和噪声级抑制,Numer。数学。,145(2020),第915-971页,doi:10.1007/s00211-020-01131-1·Zbl 1446.65098号
[25] Schillings,C.和Stuart,A.M.,《反问题的集合卡尔曼滤波器分析》,SIAM J.Numer。分析。,55(2017),第1264-1290页,doi:10.1137/16M105959X·Zbl 1366.65101号
[26] Spokoiny,V.和Panov,M.,高维后验分布的高斯近似精度,伯努利,(2021)。
[27] Stuart,A.M.,《逆向问题:贝叶斯观点》,《数值学报》。,19(2010),第451-559页,doi:10.1017/S0962492910000061·Zbl 1242.65142号
[28] Van der Vaart,A.W.,《渐近统计》,剑桥大学出版社,1998年,doi:10.1017/CBO978051180225·Zbl 0910.62001号
[29] Wong,R.,积分的渐近逼近,SIAM,2001,doi:10.137/1.9780898719260·Zbl 1078.41001号
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。