×

改进数据增强算法的收敛特性,并将其应用于贝叶斯混合建模。 (英语) Zbl 1246.60095号

摘要:驱动数据增强(DA)和三明治算法的可逆马尔可夫链定义了自共轭算子,其谱编码了算法的收敛特性。当目标分布具有不可数的支持时(实际上几乎总是如此),通常很难掌握这些光谱。我们证明,如果扩充空间是有限的,那么(在正则条件下)DA链和三明治链定义的算子是紧的,谱是\([0,1)的有限子集\). 此外,我们证明了三明治算子的谱在前者的有序元素都小于或等于后者的相应元素的意义上支配DA算子的谱。作为一个具体的例子,我们研究了一种广泛使用的DA算法,用于探索与贝叶斯混合模型相关的后验密度[J.螺栓C.P.罗伯特[J.R.Stat.Soc.,Ser.B,Stat.Methodol.56,No.2,363–375(1994;Zbl 0796.62028号)]. 特别是,我们将此混合DA算法与S.Frühwirth-Schnatter教堂【《美国统计协会期刊》96,第453号,194-209(2001年;Zbl 1015.62022号)]这是基于随机标签交换的。

MSC公司:

60J22型 马尔可夫链中的计算方法
2015年1月62日 贝叶斯推断
65二氧化碳 蒙特卡罗方法
PDF格式BibTeX公司 XML格式引用

参考文献:

[1] Asmussen,S.和Glynn,P.(2011年)。利用遍历定理证明MCMC的收敛性。统计师。普罗巴伯。莱特。81 1482-1485. ·Zbl 1232.65015号 ·doi:10.1016/j.spl.2011.05.004
[2] Buja,A.(1990年)。关于函数标准变量、交替最小二乘法和ACE的备注。Ann.Statist公司。18 1032-1069. ·Zbl 0721.62068号 ·doi:10.1214/aos/1176347739
[3] Celeux,G.、Hurn,M.和Robert,C.P.(2000年)。混合后验分布的计算和推理困难。J.Amer。统计师。协会95 957-970·Zbl 0999.62020号 ·doi:10.2307/2669477
[4] Diaconis,P.、Khare,K.和Saloff-Coste,L.(2008)。吉布斯抽样、指数族和正交多项式。统计师。科学。23 151-178. 带着作者的评论和反驳·Zbl 1327.62058号 ·doi:10.1214/07-STS252
[5] Diebolt,J.和Robert,C.P.(1994年)。通过贝叶斯抽样估计有限混合分布。J.罗伊。统计师。Soc.序列号。乙56 363-375·兹比尔0796.62028
[6] Flegal,J.M.、Haran,M.和Jones,G.L.(2008年)。马尔可夫链蒙特卡罗:我们能相信第三个重要数字吗?统计师。科学。23 250-260. ·Zbl 1327.62017年 ·doi:10.1214/08-STS257
[7] Frühwirth-Schnatter,S.(2001)。经典和动态切换及混合模型的马尔可夫链蒙特卡罗估计。J.Amer。统计师。协会96 194-209·Zbl 1015.62022号 ·doi:10.1198/016214501750333063
[8] 霍伯特,J.P.(2011)。数据增强算法:理论和方法。《马尔可夫链蒙特卡罗手册》(S.Brooks、A.Gelman、G.Jones和X.-L.Meng编辑)。查普曼和霍尔/CRC出版社,佛罗里达州博卡拉顿·Zbl 1229.65017号
[9] Hobert,J.P.和Marchev,D.(2008年)。数据增强、边缘增强和PX-DA算法的理论比较。Ann.Statist公司。36 532-554·Zbl 1155.60031号 ·doi:10.1214/009053600000000569
[10] 霍伯特,J.P.和罗曼,J.C.(2011)。Y.Yu和X.-L.Meng对“中心还是非中心:这不是问题——提高MCMC效率的辅助充分交织策略(ASIS)”的讨论。J.计算。图表。统计师。20 571-580.
[11] Jasra,A.、Holmes,C.C.和Stephens,D.A.(2005年)。马尔可夫链蒙特卡罗方法和贝叶斯混合建模中的标签切换问题。统计师。科学。20 50-67. ·Zbl 1100.62032号 ·doi:10.1214/088342305000000016
[12] Jones,G.L.和Hobert,J.P.(2001年)。通过马尔可夫链蒙特卡罗诚实地探索难处理的概率分布。统计师。科学。16 312-334. ·Zbl 1127.60309号 ·doi:10.1214/ss/1015346317
[13] Jones,G.L.、Haran,M.、Caffo,B.S.和Neath,R.(2006)。马尔可夫链蒙特卡罗固定宽度输出分析。J.Amer。统计师。协会101 1537-1547·Zbl 1171.62316号 ·doi:10.1198/016214500000492
[14] Lee,K.、Marin,J.M.、Mengersen,K.L.和Robert,C.(2008年)。混合分布的贝叶斯推断。印度统计研究所白金禧年(N.N.Sastry,ed.)。印度统计研究所,班加罗尔。
[15] Liu,J.S.和Sabatti,C.(2000年)。贝叶斯计算的广义吉布斯采样器和多重网格蒙特卡罗。生物特征87 353-369·Zbl 0960.65015号 ·doi:10.1093/biomet/87.2.353
[16] Liu,J.S.、Wong,W.H.和Kong,A.(1994年)。吉布斯采样器的协方差结构及其在估计量和增强方案比较中的应用。生物特征81 27-40·Zbl 0811.62080号 ·doi:10.1093/biomet/81.1.27
[17] Liu,J.S.、Wong,W.H.和Kong,A.(1995)。不同扫描下吉布斯采样器的协方差结构和收敛速度。J.罗伊。统计师。Soc.序列号。B 57 157-169·Zbl 0811.60056号
[18] Liu,J.S.和Wu,Y.N.(1999年)。用于数据扩充的参数扩展。J.Amer。统计师。协会94 1264-1274·Zbl 1069.62514号 ·doi:10.2307/2669940
[19] Meng,X.-L.和van Dyk,D.A.(1999)。通过条件增强和边缘增强寻求有效的数据增强方案。生物特征86 301-320·兹比尔1054.62505 ·doi:10.1093/biomet/86.2.301
[20] Meyn,S.P.和Tweedie,R.L.(1993年)。马尔可夫链和随机稳定性。斯普林格,伦敦·Zbl 0925.60001号
[21] Mira,A.和Geyer,C.J.(1999)。蒙特卡罗马尔可夫链排序。技术报告632,明尼苏达大学统计学院。
[22] Papaspiliopoulos,O.、Roberts,G.O.和Sköld,M.(2007)。层次模型参数化的一般框架。统计师。科学。22 59-73. ·兹比尔1246.62195 ·doi:10.1214/0883423070000014
[23] Retherford,J.R.(1993)。希尔伯特空间:紧算子和迹定理。伦敦数学学会学生课文27。剑桥大学出版社,剑桥·Zbl 0783.47031号
[24] Robert,C.P.和Casella,G.(2004年)。蒙特卡洛统计方法,第二版,施普林格,纽约·Zbl 1096.62003年
[25] Roberts,G.O.和Rosenthal,J.S.(1997年)。几何遍历性和混合马尔可夫链。电子。公共概率。2 13-25(电子)·Zbl 0890.60061号
[26] Roberts,G.O.和Rosenthal,J.S.(2001年)。马尔可夫链和反初始化过程。扫描。《美国联邦法律大全》第28卷第489-504页·Zbl 0985.60067号 ·doi:10.1111/1467-9469.00250
[27] Rosenthal,J.S.(2003)。近周期马尔可夫链蒙特卡罗算法的渐近方差和收敛速度。J.Amer。统计师。协会98 169-177·Zbl 1048.60057号 ·doi:10.1198/016214503388619193
[28] Roy,V.和Hobert,J.P.(2007年)。贝叶斯概率回归马尔可夫链蒙特卡罗算法的收敛速度和渐近标准误差。J.R.统计社会服务。B统计方法。69 607-623. ·文件编号:10.1111/j.1467-9868.2007.00602.x
[29] Rudin,W.(1991)。功能分析,第二版,McGraw-Hill,纽约·Zbl 0867.46001号
[30] Tanner,M.A.和Wong,W.H.(1987)。通过数据增强计算后验分布(与讨论)。J.Amer。统计师。协会82 528-550·Zbl 0619.62029号 ·doi:10.2307/2289457
[31] Tierney,L.(1994年)。用于探索后验分布的马尔可夫链(带讨论)。Ann.Statist公司。22 1701-1762. ·Zbl 0829.62080号 ·doi:10.1214/aos/1176325750
[32] van Dyk,D.A.和Meng,X.-L.(2001)。数据增强的艺术(与讨论)。J.计算。图表。统计师。10 1-50. ·doi:10.1198/10618600152418584
[33] Voss,H.(2003)。非线性本征问题本征值的变分特征。《科学与工程数学与计算机建模国际会议论文集》(M.Kocandrlova和V.Kelar,eds.)379-383。布拉格捷克技术大学。
[34] Yu,Y.和Meng,X.L.(2011)。集中与否:这不是问题所在——一种辅助充分交织战略(ASIS),用于提高MCMC效率(通过讨论)。J.计算。图表。统计师。20 531-570.
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。