×

多尺度亚稳态动力学和扰动马尔可夫链的渐近平稳分布。 (英语) Zbl 1348.60107号

摘要:我们假设马尔可夫链的转移矩阵依赖于一个参数(varepsilon),并收敛为(varepsilon)到0。链对于\(\varepsilon>0\)是不可约的,但当\(\valepsilon=0\)时,链可能有几个基本的通信类。这会导致亚稳态行为,可能在多个时间尺度上。对于每一个相关的时间尺度,我们导出了两条有效链。第一个描述了(可能不可逆的)亚稳态动力学,而第二个描述了亚稳态逃逸概率。给出了这些链的渐近转移概率的闭概率表达式。因此,我们获得了计算承诺函数和极限平稳分布的有效算法。

MSC公司:

60J10型 马尔可夫链(离散状态空间上的离散时间马尔可夫过程)
60F05型 中心极限和其他弱定理
60J22型 马尔可夫链中的计算方法
65立方厘米 马尔可夫链的数值分析或方法
PDF格式BibTeX公司 XML格式引用

参考文献:

[1] D.Aldous,J.A.Fill,可逆马尔可夫链和图上的随机游动。未完成的专著,2014年重新编译,网址:http://www.stat.berkeley.edu网站/aldous/RWG/book.html。
[2] Beltran,J。;Landim,C.,连续时间马尔可夫链的隧穿和亚稳态II,不可逆情况,J.Stat.Phys。,149, 598-618, (2012) ·Zbl 1260.82063号
[3] 北伯格伦德。;Gentz,B.,《低速动力系统中的噪声诱导现象:样本路径方法》(2006),Springer·Zbl 1098.37049号
[4] 北伯格伦德。;Gentz,B。;Kuehn,C.,《从随机poincare映射到随机混合模式振荡模式》,J.Dynam。微分方程,27,83-136,(2015)·Zbl 1348.37087号
[5] Bovier,A.,《元稳定性》(Kotecky,R.,《当代数理统计物理方法》,数学课堂讲稿,第2009卷,(2006),Springer)·兹比尔1180.82008
[6] Bovier,A。;埃克霍夫,M。;盖拉德,V。;Klein,M.,可逆马尔可夫链中的亚稳态和低能级谱,通信数学。物理。,228, 219-255, (2002) ·Zbl 1010.60088号
[7] Bovier,A。;埃克霍夫,M。;盖拉德,V。;Klein,M.,可逆扩散过程中的亚稳态1。容量和退出时间的尖锐渐近,《欧洲数学杂志》。Soc.(JEMS),6399-424,(2004)·Zbl 1076.82045号
[8] Bovier,A。;盖拉德,V。;Klein,M.,可逆扩散过程中的亚稳态2。小特征值的精确渐近性,《欧洲数学杂志》。Soc.(JEMS),769-99,(2005)·Zbl 1105.82025号
[9] Cameron,M.,使用最小生成树计算代表能源景观的网络的渐近谱,Netw。埃特罗格。媒体,9,383-416,(2014)·Zbl 1302.65037号
[10] 卡梅隆,M。;Vanden-Eijnden,E.,《复杂网络中的流:理论、算法和在lennard-Jones簇重排中的应用》,J.Stat.Phys。,156, 427-454, (2014) ·Zbl 1301.82031号
[11] De Sterck,H。;Miller,K。;Treister,E。;Yavneh,I.,马尔可夫链的快速多级方法,数值。线性代数应用。,18, 961-980, (2011) ·Zbl 1265.65009号
[12] Ellison,G.,《吸引力基础、长期随机稳定性和逐步进化速度》,《经济学评论》。螺柱,67,17-45,(2000)·Zbl 0956.91027号
[13] Eyring,H.,《化学反应中的活化络合物》,《化学杂志》。物理。,3, 107-115, (1935)
[14] 弗里德林,M.I。;Wentzell,A.D.,动力系统的随机扰动,(1998),Springer-Verlag纽约·Zbl 0922.60006号
[15] Gaudilliere,A。;Landim,C.,不可逆马尔可夫链的Dirichlet原理和一些递推定理,Probab。理论相关领域,158,55-89,(2014)·Zbl 1295.60087号
[16] Kramers,H.A.,力场中的布朗运动和化学反应的扩散模型,《物理学》,第7期,第284-304页,(1940年)·Zbl 0061.46405号
[17] 莱文,D.A。;佩雷斯,Y。;Wilmer,E.L.,马尔可夫链和混合时间,(2008),AMS出版社
[18] Louchard,G。;Latouche,G.,几乎完全可分解马尔可夫链迭代逼近的几何界,J.Appl。概率。,27, 521-529, (1990) ·Zbl 0721.60069号
[19] Meyer,C.D.,《随机互补、解耦马尔可夫链和几乎可约系统理论》,SIAM Rev.,31,2,240-272,(1989)·兹伯利0685.65129
[20] A.Milias-Argeitis,J.Lygeros,亚稳态Markov链的有效随机模拟,收录于:第50届IEEE决策与控制会议和欧洲控制会议(CDC-ECC),美国佛罗里达州奥兰多,2011年12月12-15日。
[21] Olivieri,E。;Scoppola,E.,具有指数小转移概率的马尔可夫链:一般域I的第一个退出问题。可逆情况,J.Stat.Phys。,79, 613-647, (1995) ·Zbl 1081.60541号
[22] Olivieri,E。;Scoppola,E.,具有指数小转移概率的马尔可夫链:一般域II的第一个退出问题。一般情况下,J.Stat.Phys。,84, 987-1041, (1996) ·Zbl 1081.60542号
[23] 奥利维耶里,E。;Vares,M.E.,《大偏差和亚稳态》(2005),剑桥大学
[24] 西蒙,H.A。;Ando,A.,《动态系统中变量的聚合》,《计量经济学》,111-138,(1961)·Zbl 0121.5103号
[25] Tifenbach,R.M.,《近似解耦马尔可夫链的组合方法1:可逆马尔可夫链条》,电子。事务处理。数字。分析。,40, 120-147, (2013) ·Zbl 1288.65011号
[26] Vanden-Eijnden,E.,过渡路径理论,(Ferrario,M.;Ciccotti,G.;Binder,K.,《凝聚物质的计算机模拟:从材料到化学生物学》,(2006),Springer),439-478
[27] Wicks,J.R。;Greenwald,A.,《计算随机稳定分布的算法及其在重复博弈中多智能体学习中的应用》(第21届人工智能不确定性会议论文集,2005年,(2005),AUAI出版社)
[28] J.R.Wicks,A.Greenwald,《马尔可夫链上的商构造及其在广义模拟退火理论中的应用》,载于:国际人工智能与数学研讨会(ISAIM 2006),美国佛罗里达州劳德代尔堡·Zbl 1136.68340号
[29] Young,H.P.,《公约的演变》,《计量经济学》,61,57-84,(1993)·Zbl 0773.90101号
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。