×

基于Mori-Zwanzig形式的参数POD-Galerkin降阶模型的递归神经网络闭包。 (英语) Zbl 1436.65093号

总结:基于Mori-Zwanzig形式的闭包建模已被证明有效地提高了基于投影的模型降阶的稳定性和准确性。然而,闭包模型对于复杂的非线性系统通常是昂贵且不可行的。为了有效地简化一般问题的模型,本文提出了参数POD-Galerkin降阶模型的递归神经网络(RNN)闭包。基于降阶解的短时间历史,RNN预测了表示未解析尺度对已解析尺度影响的记忆积分。利用条件长短期记忆(LSTM)网络作为记忆积分的回归模型,将多个时间步长的POD系数输入LSTM单元,将物理/几何参数输入LSTM的初始隐藏状态。使用隐式-显式(IMEX)龙格-库塔方案对降阶模型进行时间积分,其中显式积分存储器项,隐式积分剩余的右手边项,以提高计算效率。数值结果表明,RNN闭包可以显著提高非线性问题POD-Galerkin降阶模型的精度和效率。带有RNN闭包的POD-Galerkin降阶模型也能进行准确预测,远远超出训练数据的时间间隔。

MSC公司:

65升60 有限元、Rayleigh-Ritz、Galerkin和常微分方程的配置方法
65层55 低阶矩阵逼近的数值方法;矩阵压缩
65升06 常微分方程的多步、Runge-Kutta和外推方法
PDF格式BibTeX公司 XML格式引用
全文: DOI程序 链接

参考文献:

[1] M.阿巴迪。;阿加瓦尔,A。;巴勒姆,P。;Brevdo,E。;陈,Z。;Citro,C。;Corrado,G.S。;A.戴维斯。;迪安·J。;德文,M。;Ghemawat,S。;古德费罗,I。;竖琴,A。;欧文,G。;Isard,M。;贾毅。;Jozefowicz,R。;凯撒,L。;库德勒,M。;Levenberg,J.(莱文伯格,J.)。;马内,D。;蒙加,R。;摩尔,S。;D.穆雷。;奥拉,C。;舒斯特,M。;Shlens,J。;斯坦纳,B。;Sutskever,I。;Talwar,K。;塔克,P。;Vanhoucke,V。;瓦苏德万,V。;维加斯,F。;葡萄酒,O。;监狱长,P。;Wattenberg,M。;威克,M。;Yu,Y。;郑,X。;Research,G.,TensorFlow:异构分布式系统上的大规模机器学习(2015),技术报告
[2] Abgrall,R。;Crisovan,R.,《使用L1-范数极小化的模型简化作为非线性双曲问题的应用》,国际期刊Numer。方法流体,87,12,628-651(2018)
[3] Astrid,P。;Weiland,S。;Willcox,K。;Backx,T.,通过适当的正交分解描述的模型中的缺失点估计,IEEE Trans。自动。控制(2008)·Zbl 1367.93110号
[4] Ballarin,F。;Manzoni,A。;Quarteroni,A。;Rozza,G.,参数化定常不可压缩Navier-Stokes方程的POD-Galerkin近似的Supremizer稳定性,国际期刊Numer。方法工程,102,5,1136-1161(2015)·Zbl 1352.76039号
[5] Barrault,M。;Maday,Y。;Nguyen,北卡罗来纳州。;Patera,A.T.,《一种“经验插值”方法:应用于偏微分方程的有效降基离散化》,C.R.Math。(2004年)·Zbl 1061.65118号
[6] 本纳,P。;古吉丁,S。;Willcox,K.,参数动力系统基于投影的模型简化方法综述,SIAM Rev.,57,4,483-531(2015)·Zbl 1339.37089号
[7] 本纳,P。;Ohlberger,M。;Patera,A。;Rozza,G。;Urban,K.,参数化系统的模型简化(2017),Springer·Zbl 1381.65001号
[8] Billaud-Friess,M。;Nouy,A.,求解参数相关动力系统的动力学模型简化方法,SIAM J.Sci。计算。,39、4、A1766-A1792(2017)·Zbl 1373.65091号
[9] Carlberg,K.,《降阶模型的自适应h精化》,国际期刊编号。方法工程,102,5,1192-1210(2015)·Zbl 1352.65136号
[10] 卡尔伯格,K。;Bou-Mosleh,C。;Farhat,C.,《通过最小二乘Petrov-Galerkin投影和压缩张量近似实现高效非线性模型简化》,国际期刊Numer。方法工程,86,2,155-181(2011)·Zbl 1235.74351号
[11] Cazemier,W。;维斯塔潘,R.W。;Veldman,A.E.,驱动腔流的适当正交分解和低维模型,Phys。流体(1998)
[12] Chaturantabut,S。;Sorensen,D.C.,《通过离散经验插值进行非线性模型简化》,SIAM J.Sci。计算。(2010) ·Zbl 1217.65169号
[13] Chinesta,F。;Ladeveze,P。;Cueto,E.,基于适当广义分解的模型降阶简要回顾,Arch。计算。方法工程,18,4,395-404(2011)
[14] Cho,K。;范梅里恩博尔,B。;古尔塞,C。;巴达瑙,D。;布加尔斯,F。;施温克,H。;Bengio,Y.,使用RNN编码器-解码器进行统计机器翻译的学习短语表示(2014),arXiv预印本
[15] Cholet,F.,Keras(2015年)
[16] Chorin,A。;Stinis,P.,《问题简化、重整化和记忆》,Commun。申请。数学。计算。科学。,1, 1, 1-27 (2007) ·Zbl 1108.82023号
[17] Chorin,A.J。;Hald,O.H.,《数学和科学中的随机工具》,第3卷(2009年),施普林格出版社·Zbl 1184.60001号
[18] Chorin,A.J。;哈尔德,O.H。;Kupferman,R.,不可逆过程的最优预测和Mori-Zwanzig表示,Proc。国家。阿卡德。科学。,97, 7, 2968-2973 (2000) ·Zbl 0968.60036号
[19] Chorin,A.J。;哈尔德,O.H。;Kupferman,R.,《记忆最佳预测》,Phys。D: 非线性现象。,166, 3-4, 239-257 (2002) ·Zbl 1017.60046号
[20] 埃弗森,R。;Sirovich,L.,Karhunen-Loève gappy data程序,J.Opt。美国社会学协会(1995年)
[21] 加里凡,K。;Vandendorpe,A。;Van Dooren,P.,通过切向插值进行模型简化(2002),技术报告·Zbl 1078.41016号
[22] Givon,D。;Kupferman,R。;Hald,O.H.,正交动力学和Mori-Zwanzig形式主义的存在性证明,Isr。数学杂志。,145, 1, 221-241 (2005) ·2018年11月26日
[23] 格洛洛特,X。;Bengio,Y.,《理解深度前馈神经网络训练的困难》,(第十三届国际人工智能与统计会议论文集(2010)),249-256
[24] 古德费罗,I。;Y.本吉奥。;Courville,A.,《深度学习》(2016),麻省理工学院出版社·兹比尔1373.68009
[25] 古拉斯米,A。;E.J.帕里什。;Duraisamy,K.,《使用Mori-Zwanzig形式主义对非线性系统降阶模型中记忆效应的先验估计》,Proc。R.Soc.A,数学。物理学。工程科学。,4732205,第20170385条pp.(2017)·Zbl 1402.76065号
[26] Halko,N。;Martinsson,P.G。;Tropp,J.A.,《寻找随机性结构:构建近似矩阵分解的概率算法》,SIAM Rev.,53,217-288(2011)·Zbl 1269.65043号
[27] 赫塞文,J.S。;Rozza,G。;Stamm,B.,参数化偏微分方程的认证简化基方法(2015),Springer
[28] 赫瑟文,J.S。;Warburton,T.,Nodal间断Galerkin方法,第54卷(2008),Springer·Zbl 1134.65068号
[29] Hochreiter,S。;Schmidhuber,J.,长短期记忆,神经计算机。,9, 8, 1735-1780 (1997)
[30] Hsu,K。;古普塔,H.V。;Sorooshian,S.,《降雨径流过程的人工神经网络建模》,《水资源》。决议,31,10,2517-2530(1995)
[31] 黄,C。;Duraisamy,K。;Merkle,C.,反应流降阶建模的挑战,(2018年联合推进会议(2018)),4675
[32] 洛夫,S。;Szegedy,C.,《批量规范化:通过减少内部协变量偏移加快深层网络训练》(2015),arXiv预印本
[33] 艾奥洛,A。;Lanteri,S。;Désidéri,J.-A.,可压缩Navier-Stokes方程POD-Galerkin近似的稳定性,Theor。计算。流体动力学。,13, 6, 377-396 (2000) ·Zbl 0987.76077号
[34] Karpathy,A。;Fei-Fei,L.,生成图像描述的深度视觉语义对齐,(IEEE计算机视觉和模式识别会议论文集(2015))
[35] Kingma,D.P。;Ba Adam,J.,Adam:随机优化方法(2014),arXiv预印本
[36] Kramer,B。;Willcox,K.E.,通过提升变换和适当正交分解降低非线性模型阶数,AIAA J.,57,6,2297-2307(2019)
[37] 库茨,J.N。;Brunton,S.L。;布伦顿,B.W。;Proctor,J.L.,《动态模式分解:复杂系统的数据驱动建模》(2016),SIAM·Zbl 1365.65009号
[38] 拉帕诺,E。;Naets,F。;Desmet,W。;蒙多,D。;Nijman,E.,结构动力学模型参数模型降阶中投影基构造的贪婪抽样方法(2018),KU Leuven,技术报告
[39] 李,J。;Stinis,P.,Mori-Zwanzig不确定性量化简化模型,J.Compute。动态。,6,1,39-68(2019)·兹比尔1531.65213
[40] Lu,F。;Lin,K.K。;Chorin,A.J.,Kuramoto-Sivashinsky方程基于数据的随机模型简化,物理。D: 非线性现象。,340, 46-57 (2017) ·Zbl 1376.35100号
[41] 露西娅·D·J。;P.S.Beran。;Silva,W.A.,《降阶建模:计算物理的新方法》,Prog。Aerosp.航空公司。科学。,40, 1-2, 51-117 (2004)
[42] 马,C。;Wang,J。;E、 带记忆的模型简化和动态系统的机器学习,Commun。计算。物理。,25, 4, 947-962 (2019) ·兹比尔1473.35450
[43] Maboudi Afkham,B。;Ripamonti,N。;王,Q。;Hesthaven,J.S.,流体流动的保守模型降阶(2018),洛桑理工学院,技术报告
[44] Maday,Y.,《快速可靠求解偏微分方程的简化基方法》,(马德里国际数学家大会会议记录。马德里国际数学学家大会会议录,2006年8月22日至30日(2009年),欧洲数学学会),1255-1270·Zbl 1100.65079号
[45] Maulik,R。;莫汉,A。;Lusch,B。;Madiredy,S。;Balaprakash,P.,降阶模型闭合潜在空间动力学的时间序列学习(2019),arXiv预印本
[46] Mori,H.,《运输、集体运动和布朗运动》,Prog。西奥。物理。,33, 3, 423-455 (1965) ·Zbl 0127.45002号
[47] Ohwada,T。;Asinari,P.,《重访人工压缩性方法:不可压缩Navier-Stokes方程的渐近数值方法》,J.Compute。物理。,229, 5, 1698-1723 (2010) ·Zbl 1329.76063号
[48] 潘,S。;Duraisamy,K.,《封闭模型的数据驱动发现》,SIAM J.Appl。动态。系统。,17, 4, 2381-2413 (2018) ·Zbl 1411.70023号
[49] H装甲车。;Mohring,J.,通过矩阵插值降低参数模型阶数,Automatisierungstechnik,58,8,475-484(2010)
[50] E.J.帕里什。;Duraisamy,K.,基于Mori-Zwanzig形式主义的大涡模拟动态亚网格模型,J.Compute。物理。,349, 154-175 (2017) ·Zbl 1380.76024号
[51] 教区,E.J。;Duraisamy,K.,使用Mori-Zwanzig形式的大涡模拟的非马尔可夫闭合模型,Phys。《流体》第2、1版,第14604条,pp.(2017)
[52] E.J.帕里什。;温特兰,C。;Duraisamy,K.,具有记忆效应的基于残差的Petrov-Galerkin降阶模型(2018),arXiv预印本
[53] 佩赫斯托弗,B。;Willcox,K.,《通过低阶更新对非线性系统进行在线自适应模型简化》,SIAM J.Sci。计算。,37、4、A2123-A2150(2015)·Zbl 1323.65102号
[54] Quarteroni,A.,微分问题的数值模型(2009),Springer Milano:Springer米兰·Zbl 1170.65326号
[55] Quarteroni,A。;Formaggia,L.,心血管系统的数学建模和数值模拟,Handb。数字。分析。,12, 3-127 (2004)
[56] Quarteroni,A。;Manzoni,A。;Negri,F.,《偏微分方程的约化基方法:简介》(2015),Springer
[57] 罗希拉·沙利兹,C。;摩尔,C.,什么是宏观状态?主观观察和客观动力学(2000),技术报告
[58] 罗利,C.W。;科隆尼乌斯,T。;Murray,R.M.,使用POD和Galerkin投影对可压缩流进行模型简化,Phys。D: 非线性现象。,189, 1-2, 115-129 (2004) ·Zbl 1098.76602号
[59] Rozza,G。;Veroy,K.,关于参数化域中Stokes方程的约化基方法的稳定性,计算。方法应用。机械。工程,196,7,1244-1260(2007)·Zbl 1173.76352号
[60] Stinis,P.,无尺度分离系统的重整化Mori-Zwanzig简化模型,Proc。R.Soc.A,数学。物理学。工程科学。,4712176,第20140446条,pp.(2015)·Zbl 1371.82084号
[61] Sutskever,I。;葡萄酒,O。;Le,Q.V.,神经网络的序列到序列学习,(神经信息处理系统进展(2014)),3104-3112
[62] Unger,B。;Gugercin,S.,Kolmogorov n-线性动力系统的宽度,高级计算。数学。,1-14(2019年5月)
[63] 瓦拉查斯,P.R。;再见,W。;Wan,Z.Y。;Sapsis,T.P。;Koumoutsakos,P.,具有长短期记忆网络的高维混沌系统的数据驱动预测,Proc。R.Soc.A,数学。物理学。工程科学。,474,2213,文章20170844 pp.(2018)·Zbl 1402.92030
[64] Wan,Z.Y。;弗拉查斯,P。;库穆塔科斯,P。;Sapsis,T.,复杂动力系统中极端事件的数据辅助降阶建模,PLoS ONE,13,5,Article e0197704 pp.(2018)
[65] 温特兰,C.R。;黄,C。;Duraisamy,K.,通过伴随Petrov-Galerkin方法关闭反应流降阶模型,(AIAA航空2019论坛(2019)),3531
[66] Zhu,Y。;多明尼,J.M。;Venturi,D.,关于Mori-Zwanzig记忆积分的估计(2018)·Zbl 1402.60044号
[67] Zwanzig,R.,《不可逆热力学中的记忆效应》,物理学。修订版,124,4983-992(1961)·Zbl 0131.45006号
[68] Zwanzig,R.,非线性广义Langevin方程,J.Stat.Phys。,9, 3, 215-220 (1973)
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。