×

最佳反应坐标:变分表征和稀疏计算。 (英语) Zbl 1529.60035号

本文作者提出了连续马尔可夫系统中最优反应坐标(RCs)的一般变分特征,即最优描述控制高维随机过程长期行为的隐藏低维机制的观测值。最优RC是某一损失函数的极小值,保证了原始高维过程的统计长期特性的良好近似。他们提供了理论分析和数值示例,证明了所提出的方法适用于几种常见类型的多尺度系统,例如慢速系统、亚稳态系统和其他具有已知良好RCs的系统。作者声称,所提出的变分公式为现代机器学习方法(如深度学习和随机梯度下降)提供了一个杠杆点。

理学硕士:

60G25型 预测理论(随机过程方面)
60J25型 一般状态空间上的连续时间Markov过程
65K10码 数值优化和变分技术
62D99型 统计抽样理论及相关课题
PDF格式BibTeX公司 XML格式引用

参考文献:

[1] Au,S.K.和Beck,J.L.,《高维重要采样》,结构。安全。,25(2003),第139-163页,doi:10.1016/S0167-4730(02)00047-4。
[2] Berner,J.、Grohs,P.、Kutyniok,G.和Petersen,P.,《深度学习的现代数学》,预印本,https://arxiv.org/abs/2105.04026, 2021. ·Zbl 07571594号
[3] Besala,P.,无界系数抛物方程组的基本解和Cauchy问题,《微分方程》,33(1979),第26-38页·Zbl 0425.34003号
[4] Bittracher,A.、Banisch,R.和Schütte,C.,《分子反应坐标的数据驱动计算》,J.Chem。物理。,149(2018),154103,doi:10.1063/1.5035183·Zbl 06860496号
[5] Bittracher,A.,Klus,S.,Hamzi,B.,Koltai,P.,and Schütte,C.,通过转移流形的核嵌入降低复杂亚稳态系统的维数,非线性科学杂志。,31(2020),3,doi:10.1007/s00332-020-09668-z·Zbl 1466.37068号
[6] Bittracher,A.、Koltai,P.和Junge,O.,空间转移算子的伪生成器,SIAM J.Appl。动态。系统。,14(2015),第1478-1517页,doi:10.1137/14099872X·兹比尔1322.82011
[7] Bittracher,A.、Koltai,P.、Klus,S.、Banisch,R.、Dellnitz,M.和Schütte,C.,《复杂亚稳态系统的过渡流形:有效动力学的理论和数据驱动计算》,《非线性科学杂志》。,28(2017),第471-512页,doi:10.1007/s00332-017-9415-0·Zbl 06860496号
[8] Bittracher,A.、Moschner,J.、Koksch,B.、Netz,R.R.和Schütte,C.,《通过过渡流形分析探索NFGAILS淀粉样纤维颤动的锁定阶段》,欧洲物理杂志。J.B,94(2021),195。
[9] Bittracher,A.和Schütte,C.,一种用于聚集大量样本不足的大型马尔可夫链的概率算法,Phys。D、 416(2021),132799,doi:10.1016/j.physd.2020.132799·Zbl 1523.68170号
[10] Bittracher,A.、Schütte,C.、Junge,O.、Schítze,O.,Froyland,G.和Ober-Blöbaum,S.,《随机动力系统中慢变量的弱表征》,《动力学、优化和计算进展》,Padberg-Gehle,K.,ed.,Springer,Cham,2020年,第132-150页,doi:10.1007/978-3-030-51264-4_6·Zbl 1468.60092号
[11] Bleich,E.,具有无界系数的抛物方程基本解的全局有界性,预印本,https://arxiv.org/abs/1304.2984, 2013.
[12] Bovier,A.、Gayrard,V.和Klein,M.,可逆扩散过程的亚稳定性II:小特征值的精确渐近性,《欧洲数学杂志》。Soc.(JEMS),第7期(2005年),第69-99页·Zbl 1105.82025号
[13] Ciccotti,G.,Lelievre,T.和Vanden-Eijnden,E.,子流形上扩散的投影:在平均力计算中的应用,Comm.Pure Appl。数学。,61(2007),第371-408页,doi:10.1002/cpa.20210·Zbl 1185.82050
[14] Coifman,R.R.和Lafon,S.,扩散图,应用。计算。哈蒙。分析。,21(2006),第5-30页,doi:10.1016/j.acha.2006.04.006·Zbl 1095.68094号
[15] Deck,T.和Kruse,S.,系数无界的抛物型微分方程——参数矩阵方法的推广,Acta Appl。数学。,74(2002),第71-91页·Zbl 1021.35042号
[16] Dellnitz,M.和Junge,O.,关于复杂动力学行为的近似,SIAM J.Numer。分析。,36(1999),第491-515页,doi:10.1137/S0036142996313002·Zbl 0916.58021号
[17] D'Errico,J.,rand固定线性组合,https://de.mathworks.com/matlabcentral/fileexchange/49795-randfixedlinearcombination网站,于2021年6月16日检索。
[18] Deufhard,P.、Huisinga,W.、Fischer,A.和Schütte,C.,可逆几乎非耦合马氏链中几乎不变聚集体的识别,线性代数应用。,315(2000),第39-59页,doi:10.1016/S0024-3795(00)00095-1·Zbl 0963.65008号
[19] Deufhard,P.和Weber,M.,构象动力学中的鲁棒Perron聚类分析,线性代数应用。,398(2005),第161-184页·Zbl 1070.15019号
[20] Drineas,P.和Mahoney,M.W.,《关于近似Gram矩阵以改进基于核的学习的NyströM方法》,J.Mach。学习。Res.,6(2005),第2153-2175页·Zbl 1222.68186号
[21] E、 W.和Vanden Eijnden,E.,走向过渡路径理论,J.Stat.Phys。,123(2006),第503-523页,doi:10.1007/s10955-005-9003-9·Zbl 1101.82016年
[22] 费德勒,H.,《几何测量理论》,施普林格出版社,纽约,2014年·Zbl 0874.49001号
[23] Foucart,S.和Rauhut,H.,《压缩传感的数学导论》,Springer,纽约,2013年,doi:10.1007/978-0-8176-4948-7·Zbl 1315.94002号
[24] Friedman,A.,抛物型偏微分方程,Courier Dover Publications,Mineola,NY,2008年。
[25] Froyland,G.、Gottwald,G.A.和Hammerlindl,A.,提取多尺度系统中宏观变量及其动力学的计算方法,SIAM J.Appl。动态。系统。,13(2014),第1816-1846页,doi:10.1137/130943637·Zbl 1320.37012号
[26] Garg,S.和Pant,M.,《无网格方法:应用的综合评述》,国际计算杂志。方法,15(2018),1830001,doi:10.1142/S0219876218300015·Zbl 1404.74199号
[27] Gayrard,V.、Bovier,A.、Eckhoff,M.和Klein,M.,可逆扩散过程的亚稳定性I:容量和退出时间的夏普渐近性,《欧洲数学杂志》。Soc.(JEMS),6(2004),第399-424页·兹比尔1076.82045
[28] Gretton,A.、Borgwardt,K.M.、Rasch,M.J.、Schölkopf,B.和Smola,A.,《内核双样本测试》,J.Mach。学习。Res.,13(2012),第723-773页,http://jmlr.org/papers/v13/gretton12a.html。 ·Zbl 1283.62095号
[29] Griebel,M.、Oswald,P.和Schiekofer,T.,《边界积分方程的稀疏网格》,数值。数学。,83(1999年),第279-312页·Zbl 0935.65131号
[30] Halko,N.、Martinsson,P.G.和A.Tropp,J.,《寻找具有随机性的结构:构造近似矩阵分解的概率算法》,SIAM Rev.,53(2011),第217-288页,doi:10.1137/090771806·兹比尔1269.65043
[31] Jammalamadaka,S.R.和SenGupta,A.,《循环统计专题》,《世界科学》,新泽西州河边,2001年,doi:10.1142/4031·Zbl 1006.62050号
[32] Kalos,M.H.和Whitlock,P.A.,Monte Carlo Methods,John Wiley&Sons,纽约,2009年。
[33] Kemeny,J.和Snell,J.L.,《有限马尔可夫链》,Springer-Verlag,纽约,1976年·Zbl 0328.60035号
[34] Khoo,Y.、Lu,J.和Ying,L.,使用人工神经网络求解高维承诺函数,研究数学。科学。,6(2019),1,doi:10.1007/s40687-018-0160-2·Zbl 1498.60222号
[35] Klus,S.、Nüske,F.、Koltai,P.、Wu,H.、Kevrekidis,I.、Schütte,C.和Noé,F.,数据驱动模型简化和传递算子近似,J.非线性科学。,28(2018),第985-1010页,doi:10.1007/s00332-017-9437-7·Zbl 1396.37083号
[36] Klus,S.、Nüske,F.、Peitz,S.,Niemann,J.-H.、Clementi,C.和Schütte,C.,《Koopman生成器的数据驱动近似:模型简化、系统识别和控制》,物理。D、 406(2020),132416,doi:10.1016/j.physd.2020.132416·Zbl 1485.93097号
[37] Klus,S.,Schuster,I.,and Muandet,K.,再生核Hilbert空间中转移算子的特征合成,J.非线性科学。,30(2020),第283-315页,doi:10.1007/s00332-019-09574-z·Zbl 1437.37104号
[38] Koltai,P.,Lie,H.C.,和Plonka,M.,非确定性动力学中Perron-Frobenius和Koopman算子的Fréchet可微漂移依赖性,非线性,32(2019),pp.4232-4257,doi:10.1088/1361-6544/ab1f2a·Zbl 1475.60104号
[39] Koltai,P.和Schütte,C.,非稳态分子动力学Markov状态建模的多尺度扰动展开方法,多尺度模型。模拟。,16(2018),第1455-1485页,doi:10.1137/17M1146403·Zbl 1401.60139号
[40] Krengel,U.和Brunel,A.,《遍地定理》,德格鲁伊特,柏林,纽约,1985年·Zbl 0575.28009号
[41] Krizhevsky,A.、Sutskever,I.和Hinton,G.E.,用深度卷积神经网络进行ImageNet分类,Commun。ACM,60(2017),第84-90页,doi:10.1145/3065386。
[42] Kusuoka,S.和Stroock,D.,Malliavin微积分的应用,第二部分,J.Fac。科学。东京大学教派。IA数学。,32(1985),第1-76页·Zbl 0568.60059号
[43] LeCun,Y.、Bengio,Y.和Hinton,G.,深度学习,自然,521(2015),第436-444页,doi:10.1038/nature14539。
[44] Lelièvre,T.、Rousset,M.和Stoltz,G.,《带约束和自由能差计算的朗之万动力学》,数学。公司。,81(2012),第2071-2125页,doi:10.1090/S0025-5718-2012-02594-4·Zbl 1274.82034号
[45] Lelièvre,T.、Rousset,M.和Stoltz,G.,子流形上抽样概率测度的混合蒙特卡罗方法,数值。数学。,143(2019),第379-421页,doi:10.1007/s00211-019-01056-4·Zbl 1453.65027号
[46] Lelièvre,T.、Stoltz,G.和Zhang,W.,子流形上的多重投影MCMC算法,预印本,https://arxiv.org/abs/2003.09402, 2021. ·Zbl 07673872号
[47] Maragliano,L.、Fischer,A.、Vanden-Eijnden,E.和Ciccotti,G.,《集体变量中的字符串方法:最小自由能路径和等容曲面》,J.Chem。物理。,125(2006),024106,doi:10.1063/1.2212942。
[48] Mardt,A.,Pasqual,L.,Wu,H.,and Noé,F.,分子动力学深入学习的VAMPnets,国家通讯社。,9(2018),5,doi:10.1038/s41467-017-02388-1。
[49] McGibbon,R.T.、Husic,B.E.和Pande,V.S.,《从复杂动力学中识别简单反应坐标》,J.Chem。物理。,146(2017),044109,doi:10.1063/1.4974306。
[50] Metzner,P.、Schütte,C.和Vanden-Eijnden,E.,《简单示例集上的过渡路径理论图解》,J.Chem。物理。,125(2006),084110,doi:10.1063/1.2335447·Zbl 1185.60086号
[51] Molgedey,L.和Schuster,H.G.,使用延时相关性分离独立信号的混合物,物理学。修订稿。,72(1994年),第3634-3637页。
[52] Noé,F.,Olsson,S.,Köhler,J.和Wu,H.,《玻尔兹曼生成器:具有深度学习的多体系统的采样平衡态》,《科学》,365(2019),eaaw1147,doi:10.1126/Science.aaw1147。
[53] Novak,E.和Woźniakowski,H.,无限可微多元函数的逼近是棘手的,《复杂性》,25(2009),第398-404页,doi:10.1016/J.J.co.2008.11.002·Zbl 1180.41031号
[54] Nüske,F.、Koltai,P.、Bonsegna,L.和Clementi,C.,《条件期望有效动力学的谱特性》,熵,23(2021),134,doi:10.3390/e23020134。
[55] Pant,S.、Smith,Z.、Wang,Y.、Tajkhorshid,E.和Tiware,P.,《利用统计物理对抗AI增强分子动力学的陷阱》,J.Chem。物理。,153(2020),234118,doi:10.1063/5.0030931。
[56] Pavliotis,G.A.和Stuart,A.M.,《多尺度方法:平均和均匀化》,纽约斯普林格出版社,2008年·Zbl 1160.35006号
[57] Perez-Hernandez,G.、Paul,F.、Giorgino,T.、de Fabritiis,G.和Noé,F..《马尔可夫模型构建中慢分子序参数的识别》,《化学杂志》。物理。,139(2013),015102,doi:10.1063/1.4811489。
[58] Rabben,R.J.、Ray,S.和Weber,M.,ISOKANN:神经网络学习的Koopman算子的不变子空间,J.Chem。物理。,153(2020),114109,doi:10.1063/5.0015132。
[59] Rahimi,A.和Recht,B.,《大型内核机器的随机特征》,摘自《第20届神经信息处理系统国际会议论文集》,NIPS’07,Curran Associates,Red Hook,NY,2007年,第1177-1184页。
[60] Robert,C.P.和Casella,G.,Monte Carlo Statistical Methods,Springer,New York,1999,doi:10.1007/978-1-4757-3071-5·Zbl 0935.62005号
[61] Roberts,G.O.和Rosenthal,J.S.,通用状态空间马尔可夫链和MCMC算法,Probab。调查。,1(2004),第20-71页,doi:10.1214/15495780410000024·Zbl 1189.60131号
[62] Rosenblatt,M.,转移概率算符,《第五届伯克利数理统计与概率研讨会论文集》,加利福尼亚大学出版社,伯克利,加利福尼亚州,1967年,第473-483页·兹比尔0222.60042
[63] Ruder,S.,《梯度下降优化算法概述》,预印本,https://arxiv.org/abs/1609.04747, 2017.
[64] Sarich,M.、Banisch,R.、Hartmann,C.和Schütte,C.,分子动力学中罕见事件的马尔可夫状态模型,熵,16(2014),第258-286页,doi:10.3390/e16010258·Zbl 1338.82038号
[65] Schölkopf,B.和Smola,A.J.,《使用内核学习:支持向量机、正则化、优化和超越》,麻省理工学院出版社,马萨诸塞州剑桥,2001年。
[66] Schütte,C.、Fischer,A.、Huisinga,W.和Deufhard,P.,基于混合蒙特卡罗的构象动力学直接方法,J.Compute。物理。,151(1999),第146-168页,doi:10.1006/jcph.1999.6231·Zbl 0933.65145号
[67] Schütte,C.和Sarich,M.,《分子动力学中的亚稳态和马尔可夫状态模型:建模、分析、算法方法》,美国数学学会,普罗维登斯,RI,2014年·Zbl 1305.60004号
[68] Senior,A.W.、Evans,R.、Jumper,J.、Kirkpatrick,J.,Sifre,L.、Green,T.、Qin,C.、Zhiídek,A.、Nelson,A.W.R.、Bridgeland,A.、Penedones,H.、Petersen,S.、Simonyan,K.、Crossan,S.,Kohli,P.、Jones,D.T.、Silver,D.、Kavukcuoglu,K.and Hassabis,D.,《利用深度学习潜能改进蛋白质结构预测》,《自然》,577(2020),第706-710页,doi:10.1038/s41586-019-1923-7。
[69] Singer,A.、Erban,R.、Kevrekidis,I.G.和Coifman,R.,《利用各向异性扩散映射检测随机动力系统中的内部慢变量》,Proc。国家。阿卡德。科学。美国,106(2009),第16090-16095页,doi:10.1073/pnas.0905547106。
[70] Udell,M.和Townsend,A.,为什么大数据矩阵近似低秩?,SIAM J.数学。数据科学。,1(2019年),第144-160页,doi:10.1137/18M1183480·Zbl 1513.68057号
[71] Wang,W.和Roberts,A.,慢速流形和慢速随机微分系统的平均,J.Math。分析。申请。,398(2013),第822-839页,doi:10.1016/j.jmaa.2012.09.029·Zbl 1262.34069号
[72] Wehmeyer,C.和Noé,F.,《时间标记自动编码器:分子动力学缓慢集体变量的深度学习》,J.Chem。物理。,148(2018),241703,doi:10.1063/1.5011399。
[73] Zwanzig,R.,《非平衡统计力学》,牛津大学出版社,纽约,2001年·Zbl 1267.82001年
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。