×

Metropolis-Hastings通过分类。 (英语) Zbl 07784927号

摘要:本文在边际可能性难以评估的模型中,在后验抽样和优化之间开发了一个贝叶斯计算平台。受对比学习和生成对抗网络(GAN)的启发,我们将似然函数估计问题重新定义为一个分类问题。将一个模拟假数据的生成器与一个试图将其与真实数据区分开来的分类器进行比较,可以获得可插入Metropolis-Hastings算法的似然(比率)估计值。由此产生的马尔可夫链在稳定状态下从近似后验值生成样本,我们对其渐近性质进行了表征。利用与经验贝叶斯和贝叶斯误指定的联系,我们根据实际后验的收缩速度和分类器的收敛速度来量化收敛速度。还提供了渐近正态结果,证明了我们方法的推理潜力。我们举例说明了我们的方法的有用性,这些例子对现有的贝叶斯类无蹄方法提出了挑战。本文的补充材料可在网上获得。

MSC公司:

62至XX 统计学

软件:

卡尔
PDF格式BibTeX公司 XML格式引用

参考文献:

[1] Ait Sahalia,Y.(2002),“离散采样扩散的最大似然估计:一种闭式近似方法”,计量经济学,70223-262。内政部:·兹比尔1104.62323
[2] Andrieu,C.、Doucet,A.和Holenstein,R.(2009),“粒子马尔可夫链蒙特卡罗方法”,《皇家统计学会杂志》,B辑,72,1-33·Zbl 1184.65001号
[3] Andrieu,C.和Roberts,G.O.(2009),“有效蒙特卡罗计算的伪边缘方法”,《统计年鉴》,第37、697-725页。内政部:·Zbl 1185.60083号
[4] Andrieu,C.和Vihola,M.(2015),“伪边缘马尔可夫链蒙特卡罗算法的收敛性”,《应用概率年鉴》,251030-1077。内政部:·Zbl 1326.65012号
[5] Beaumont,M.A.(2003),“遗传监测人群中人口增长或下降的估计”,《遗传学》,1641139-1160。内政部:。
[6] Beaumont,M.A.、Zhang,W.和Balding,D.J.(2002),“人口遗传学中的近似贝叶斯计算”,遗传学,1622025-2035。内政部:。
[7] Bernton,E.、Jacob,P.、Gerber,M.和Robert,C.(2019),“利用Wasserstein距离进行近似贝叶斯计算”,《皇家统计学会杂志》,B辑,81,235-269。内政部:·Zbl 1420.62022号
[8] Blum,M.(2010),“近似贝叶斯计算:非参数视角”,《美国统计协会杂志》,第105期,第1178-1187页。内政部:·Zbl 1390.62052号
[9] Blum,M.,Nunes,M.、Prangle,D.和Sisson,S.(2013年),“近似贝叶斯计算中降维方法的比较综述”,《统计科学》,第28期,第189-208页。内政部:·Zbl 1331.62123号
[10] Clarte,G.、Robert,C.、Ryder,R.和Stoehr,J.(2021年),“通过Gibbs-like Steps进行的组件近似贝叶斯计算”,《生物统计学》,第108、591-607页。内政部:·Zbl 07459718号
[11] Cox,J.、Ingersoll,J.和Ross,S.(1985),“利率期限结构理论”,《计量经济学》,53,385-407。内政部:·Zbl 1274.91447号
[12] Cranmer,K.、Pavez,J.和Louppe,G.(2016),“用校准的判别分类器近似似然比”,arXiv,1-30。
[13] De Blasi,P.和Walker,S.(2013),“未指定参数模型差异的贝叶斯估计”,贝叶斯分析,878-1800。内政部:·Zbl 1329.62123号
[14] Deligiannidis,G.、Doucet,A.和Pitt,M.K.(2018),“相关伪边际方法”,《皇家统计学会杂志》,B辑,80,839-870。内政部:·Zbl 1407.62074号
[15] Diggle,P.J.和Gratton,R.J.(1984),“隐式统计模型的蒙特卡罗推断方法”,《皇家统计学会杂志》,B辑,46,193-212。内政部:·Zbl 0561.62035号
[16] Doucet,A.,Pitt,M.,Deligiannidis,G.和Kohn,R.(2014),“使用无偏似然估计时马尔可夫链蒙特卡罗的有效实现”,arXiv,1-40·Zbl 1452.62055号
[17] Durham,G.和Gallant,A.(2002),“连续时间扩散过程最大似然估计的数值技术”,《商业与经济统计杂志》,第20期,第297-338页。
[18] Durkan,C.、Murray,I.和Papamakarios,G.(2020),“关于无可能性推理的对比学习”,国际机器学习会议论文集,119297-338。
[19] Fearnhead,P.和Prangle,D.(2011),“构建ABC汇总统计:半自动ABC”,《自然先例》,74,1-10。
[20] Frazier,D.和Drovandi,C.(2021),“具有合成可能性的稳健近似贝叶斯推断”,《计算与图形统计杂志》,30958-976。内政部:·Zbl 07499930号
[21] Frazier,D.、Martin,G.、Robert,C.和Rousseau,J.(2018),“近似贝叶斯计算的渐近性质”,《生物统计学》,105,593-607。内政部:·Zbl 1499.62112号
[22] Frazier,D.、Robert,C.和Rousseau,J.(2020),“近似贝叶斯计算中的模型错误规范:结果和诊断”,《皇家统计学会杂志》,B辑,82,421-444。内政部:·Zbl 07554760号
[23] Ghosal,S.、Ghosh,J.K.和van der Vaart,A.W.(2000),“后验分布的收敛速度”,《统计年鉴》,第28期,第500-531页。内政部:·Zbl 1105.62315号
[24] Ghosal,S.和van der Vaart,A.W.(2007),“Noniid观测的后验分布收敛率”,《统计年鉴》,第35期,192-223页。内政部:·Zbl 1114.62060号
[25] Gillespie,D.(1977),“耦合化学反应的精确随机模拟”,《物理化学杂志》,812340-2361。内政部:。
[26] Goodfellow,I.、Pouget-Abadie,J.、Mirza,M.、Xu,B.、Warde-Farley,D.和Ozair,S.(2014),“生成对抗网”,第27届神经信息处理系统国际会议论文集,22672-2680。
[27] Gutmann,M.和Hyvarinen,A.(2012),“非标准化统计模型的噪声对比估计及其在自然图像统计中的应用”,《机器学习研究杂志》,13,307-361·兹比尔1283.62064
[28] Gutmann,M.U.和Corander,J.(2016),“基于模拟的统计模型无似然推断的贝叶斯优化”,《机器学习研究杂志》,第17期,第4256-4302页·Zbl 1392.62072号
[29] Gutmann,M.U.、Dutta,R.、Kaski,S.和Corander,J.(2018),“通过分类进行无似然推断”,《统计与计算》,第28期,第411-425页。内政部:·Zbl 1384.62089号
[30] Hastie,T.、Tibshirani,R.和Friedman,J.(2009),《统计学习的要素》。Springer统计学系列,纽约:Springer·Zbl 1273.62005年
[31] Heermans,J.、Begy,V.和Louppe,G.(2020),“具有摊销近似比率估计的无可能性MCMC”,《国际机器学习会议论文集》,11915112-15117。
[32] Heston,S.(1993),“随机波动期权的封闭解及其在债券和货币期权中的应用”,《金融研究评论》,第6327-343页。内政部:·Zbl 1384.35131号
[33] Jiang,B.,Wu,T.,Zheng,C.,and Wong,W.(2017),“通过深度神经网络进行近似贝叶斯计算的学习总结统计”,《中国统计》,第27期,第1595-1618页·Zbl 1392.62073号
[34] Kaji,T.、Manresa,E.和Pouliot,G.(2020),“结构估算的对抗方法”,arXiv。
[35] Kleijn,B.和van der Vaart,A.(2006),“无限维贝叶斯统计中的错误规范”,《统计年鉴》,34837-877。内政部:·Zbl 1095.62031号
[36] Marin,J.、Pillai,N.、Robert,C.和Rousseau,J.(2014),“贝叶斯模型选择的相关统计”,英国皇家统计学会期刊,B辑,76833-859。内政部:·兹比尔1411.62072
[37] Meeds,T.和Welling,M.(2015),“优化蒙特卡罗:高效且尴尬的并行无似然推断”,《神经信息处理系统的进展》,28,289-309。
[38] Mohamed,S.和Lakshminarayanan,B.(2017),“内隐生成模型中的学习”,arXiv,1-10。
[39] O'Neill,P.D.、Balding,D.J.、Becker,N.G.、Eerola,M.和Mollison,D.(2000),“用马尔可夫链蒙特卡罗方法分析家庭暴发的传染病数据”,《皇家统计学会杂志》,C辑,49,517-542。内政部:·Zbl 0965.62098号
[40] O'Ryan,C.、Harley,E.H.、Bruford,M.W.、Beaumont,M.、Wayne,R.K.和Cherry,M.I.(1998),“南非水牛种群碎片遗传多样性的微卫星分析”,动物保护,185-94。内政部:。
[41] Papamakarios,G.和Murray,I.(2016年),“利用贝叶斯条件密度估计对模拟模型进行快速自由推断”,《神经信息处理系统进展》,29,289-309。
[42] Papamakarios,G.、Sterrat,D.和Murray,I.(2019),“序列神经似然性:具有自回归流的快速似然-自由推断”,人工智能与统计国际会议,89,289-309。
[43] Patilea,V.(2001),“凸模型、MLS和错误规范”,《统计年鉴》,第2094-123页。内政部:·Zbl 1029.62020号
[44] Pham,K.、Nott,D.和Chaudhuri,S.(2014),“关于使用灵活分类器近似ABC-MCMC的说明”,《ISI统计研究快速传播杂志》,第3218-227页。内政部:。
[45] Prangle,D.(2017),“调整ABC距离函数”,贝叶斯分析,12289-309。内政部:·Zbl 1384.62098号
[46] Price,L.、Drovandi,C.、Lee,A.和Nott,D.(2018),“贝叶斯综合似然”,《计算与图形统计杂志》,27,1-119。内政部:·Zbl 07498962号
[47] Pritchard,J.K.、Seielstad,M.T.、Perez-Lezaun,A.和Feldman,M.W.(1999),“人类Y染色体的群体增长:Y染色体微卫星的研究”,《分子生物学与进化》,第16期,1791-1798页。内政部:。
[48] Ricker,W.E.(1954),“种群与招募”,《加拿大渔业委员会期刊》,第11期,第559-623页。内政部:。
[49] Robert,C.P.和Casella,G.(2004),蒙特卡洛统计方法(第二版),纽约:施普林格出版社·Zbl 1096.62003年
[50] Robert,C.P.、Cornuet,J.-M.、Marin,J.-M和Pillai,N.S.(2011),“近似贝叶斯计算模型选择缺乏信心”,《美国国家科学院学报》,第108期,第15112-15117页。DOI:。
[51] Roberts,G.和Stramer,O.(2001),“使用Metropolis-Hastings算法推断部分观测非线性扩散模型”,《生物特征分析》,88,603-621。内政部:·Zbl 0985.62066号
[52] Sorensen,H.(2004),“离散时间点观测到的扩散过程的参数推断:一项调查”,《国际统计评论》,72,337-354。
[53] Stramer,O.和Bognar,M.(2011),“使用伪边缘方法对不可约扩散过程的贝叶斯推断”,贝叶斯分析,第6231-258页。内政部:·Zbl 1330.60092号
[54] Sugiyama,M.、Suzuki,T.和Kanamori,T.(2012),《机器学习中的密度比估计》,剑桥:剑桥大学出版社·Zbl 1274.62037号
[55] Tavaré,S.、Balding,D.J.、Griffiths,R.C.和Donnelly,P.(1997),“从DNA序列数据推断聚结时间”,遗传学,145505-518。内政部:。
[56] Thomas,O.、Dutta,R.、Corander,J.、Kaski,S.和Gutmann,M.(2021),“比率估计的无似然推理”,贝叶斯分析,1,1-31。
[57] Tsvetkov,D.、Hristov,L.和Angelova-Slavova,R.(2017),“关于大都会-黑斯廷斯-马尔可夫链的收敛”,《Serdica数学杂志》,43,93-110·Zbl 1488.60177号
[58] van der Vaart,A.W.(1998),《渐近统计》,剑桥:剑桥大学出版社·Zbl 0910.62001号
[59] van der Vaart,A.W.和Wellner,J.A.(1996),《弱收敛和经验过程:统计应用》,纽约:Springer出版社·Zbl 0862.60002号
[60] Wilkinson,D.(2011),《系统生物学随机建模》(第二版),佛罗里达州博卡拉顿:查普曼和霍尔/CRC·Zbl 1099.92004号
[61] Wood,S.N.(2010),“噪声非线性生态动力系统的统计推断”,《自然》,4661102-1104。内政部:。
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。