×

基于投影的模型简化:基于物理的机器学习公式。 (英语) Zbl 1411.65061号

摘要:本文考虑创建用于科学和工程应用的参数替代模型,其目标是预测高维输出量,如压力、温度和应变场。该方法使用适当的正交分解(POD)对这些感兴趣的量进行低维参数化,并将该参数化与机器学习方法相结合,以学习输入参数和POD扩展系数之间的映射。POD扩展中使用特定解决方案提供了一种嵌入物理约束的方法,例如边界条件和必须保留的解决方案的其他特征。通过两个工程实例探讨了四种不同机器学习技术(神经网络、多元多项式回归、k近邻和决策树)的相对成本和有效性。第一个例子考虑了翼型周围压力场的预测,而第二个例子考虑的是受损复合板上应变场的预测。案例研究证明了将物理约束嵌入到学习模型中的重要性,并强调了重要的一点,即工程环境中可用的模型训练数据量通常远小于其他机器学习应用程序中的数据量,这使得从物理模型中吸收知识变得至关重要。

MSC公司:

2015财年65 矩阵特征值和特征向量的数值计算
68T05型 人工智能中的学习和自适应系统
PDF格式BibTeX公司 XML格式引用
全文: 内政部

参考文献:

[1] Coveney,P.V.公司。;Dougherty,E.R。;Highfield,R.R.,大数据也需要大理论,Philos Trans R Soc Lond A,374,2080,1-11(2016)
[2] 安托拉斯,A.C。;索伦森特区。;Gugercin,S.,《大型系统模型简化方法的调查》,Contemp Math,280193-219(2001)·Zbl 1048.93014号
[3] Rozza,G。;Huynh,D.B.P。;Patera,A.T.,仿射参数化椭圆强制偏微分方程的约化基近似和后验误差估计,Arch Comput Methods Eng,15,3,1-47(2007)
[4] Chinesta,F。;Ladeveze,P。;Cueto,E.,基于适当广义分解的模型降阶简评,Arch Comput Methods Eng,18,4,395(2011)
[5] 季刊A,Rozza G,编辑。建模和计算简化的降阶方法。施普林格;2014.; 季刊A,Rozza G,编辑。建模和计算简化的降阶方法。施普林格;2014. ·Zbl 1280.65004号
[6] 本纳,P。;古吉丁,S。;Willcox,K.,参数动力系统基于投影的模型简化方法综述,SIAM Rev,57,4,483-531(2015)·Zbl 1339.37089号
[7] 赫塞文,J。;Rozza,G。;Stamm,B.,参数化偏微分方程的认证简化基方法(2016),Springer·Zbl 1329.65203号
[8] Chinesta,F。;A.韦尔塔。;Rozza,G。;Willcox,K.,模型简化方法,计算力学百科全书,第二版,1-36(2017)
[9] Lumley,J.,《非均匀湍流的结构、大气湍流和无线电波传播》,166-178(1967)
[10] 霍姆斯,P。;Lumley,J。;Berkooz,G.,《湍流、相干结构、动力系统和对称性》(1996),剑桥大学出版社:剑桥大学出版社,英国剑桥·Zbl 0890.76001号
[11] Sirovich,L.,湍流和相干结构动力学。第1部分:相干结构,Q Appl Math,45,3,561-571(1987)·Zbl 0676.76047号
[12] Ly,H。;Tran,H.,使用适当的正交分解对物理过程进行建模和控制,《数学计算模型杂志》,33,223-236(2001)·Zbl 0966.93018号
[13] Bui-Thanh,T。;Damodaran,M。;Willcox,K.,使用适当正交分解的空气动力学数据重建和逆向设计,AIAA J,42,8,1505-1516(2004)
[14] 埃弗森,R。;Sirovich,L.,gappy数据的Karhunen-Loeve程序,美国光学学会杂志,12165-1664(1995)
[15] 奥杜泽,C。;De Vuyst,F。;Nair,P.B.,使用时空参数主成分分析对参数化偏微分方程进行降阶建模,国际数值方法工程杂志,80,8,1025-1057(2009)·Zbl 1176.76059号
[16] 维茨,D。;北卡拉扬。;Haasdonk,B.,《使用核方法对多尺度模型进行替代建模》,《国际数值方法工程杂志》,101,1,1-28(2014)·Zbl 1352.65144号
[17] 奥杜泽,C。;De Vuyst,F。;Nair,P.B.,参数化含时偏微分方程的非侵入降阶建模,数值方法偏微分Equ,29,5,1587-1628(2013)·Zbl 1274.65270号
[18] Mainini,L。;Willcox,K.,《支持实时结构评估和决策的替代建模方法》,AIAA J,53,6,1612-1626(2015)
[19] 尤鲁,E。;张,R。;Kara,L.B.,《可变负载配置下最优拓扑的数据驱动调查和估计》,计算方法生物医学工程,4,2,61-72(2016)
[20] 赫塞文,J.S。;Ubbiali,S.,《使用神经网络对非线性问题进行非侵入式降阶建模》,《计算物理杂志》,363,55-78(2018)·Zbl 1398.65330号
[21] Chen,W。;赫塞文,J.S。;B.俊强。;杨,Z。;Tihao,Y.,《贪婪的非侵入流体动力学降阶模型》,西北工业大学学报(2017)
[22] Ljung,L.,《系统识别》(1987),普伦蒂斯·霍尔·Zbl 0639.93059号
[23] Viberg,M.,基于子空间的线性时不变系统识别方法,Automatica,31,121835-1851(1995)·Zbl 0846.93023号
[24] Kramer,B。;Gugercin,S.,MIMO系统基于切向插值的特征系统实现算法,数学计算模型Dyn Syst,22,4,282-306(2016)·Zbl 1348.93132号
[25] Qin,S.J.,《子空间识别概述》,计算机化学工程,30,10-12,1502-1513(2006)
[26] Reynders,E.,(操作)模态分析的系统识别方法:回顾和比较,Arch Comput methods Eng,19,1,51-124(2012)·Zbl 1354.93004号
[27] Abderrahim,K。;Mathlouthi,H。;Msahli,F.,《使用高阶统计量识别有限脉冲响应系统的新方法》,IET Signal Proc,4,5,488-501(2010)
[28] 拉宾纳,L。;Crochiere,R。;Allen,J.,存在噪声和带限输入的FIR系统建模和识别,IEEE Trans-Acoust,26,4,319-333(1978)·Zbl 0415.93055号
[29] Mendel,J.,《信号处理和系统理论中的高阶统计(谱)教程:理论结果和一些应用》,IEEE Proc,79,278-305(1991)
[30] 安托拉斯,A.C。;Anderson,B.D.Q.,《关于标量有理插值问题》,IMA J Math Control Inf,3,2-3,61-88(1986)·Zbl 0637.93014号
[31] Lefteriu,S。;Antoulas,A.C.,从频域数据建模多端口系统的新方法,计算机辅助设计集成电路系统IEEE Trans,29,1,14-27(2010)
[32] 梅奥,A。;Antoulas,A.C.,广义实现问题的解决框架,线性代数应用,425,2-3,634-662(2007)·Zbl 1118.93029号
[33] 比蒂,C。;Gugercin,S.,实现-依赖(H_2)-近似,Proc。IEEE连接决策。控制,毛伊岛,HI,美国,4953-4958(2012)
[34] 舒尔茨,P。;Unger,B。;比蒂,C。;Gugercin,S.,数据驱动结构化实现,线性代数应用,537250-286(2018)·Zbl 1373.93087号
[35] 爱奥尼亚,A.C。;Antoulas,A.C.,《时域和频域系统识别中的矩阵铅笔》,控制理论向全局控制的发展。全球控制、控制、机器人和传感器的控制理论发展,79-88(2012),工程技术研究所
[36] 佩赫斯托弗,B。;古吉丁,S。;Willcox,K.,用时域Loewner模型进行数据驱动简化模型构建,SIAM科学计算杂志,39,5,A2152-A2178(2017)·Zbl 1448.65087号
[37] 德马奇,Z。;古吉丁,S。;Beattie,C.,离散化(H_2)近似的基于四次向量拟合,SIAM J Scient Comput,37,2,A625-A652(2015)·Zbl 1320.93029号
[38] 德马奇,Z。;古吉丁,S。;Beattie,C.,矩阵值有理逼近的向量拟合,SIAM J Scient Comput,37,5,A2346-A2379(2015)·Zbl 1323.93050号
[39] Tu,J.H。;罗利,C.W。;Luchtenburg,D.M。;Brunton,S.L。;Kutz,J.N.,《关于动态模式分解:理论和应用》,J Compute Dyn,1,2,391-421(2014)·Zbl 1346.37064号
[40] Proctor,J.L。;Brunton,S.L。;Kutz,J.N.,带控制的动态模式分解,SIAM J Appl Dyn Syst,15,1,142-161(2016)·Zbl 1334.65199号
[41] Proctor,J.L。;Brunton,S.L。;布伦顿,B.W。;Kutz,J.N.,《开发复杂系统中的稀疏性和无方程体系结构》,《欧洲物理杂志》,第223期,第13期,第2665-2684页(2014年)
[42] 佩赫斯托弗,B。;Willcox,K.,基于非侵入投影模型简化的数据驱动算子推断,计算方法应用机械工程,306196-215(2016)·Zbl 1436.93062号
[43] Castelletti,A。;Galelli,S。;Restelli,M。;Soncini Sessa,R.,环境系统优化管理的数据驱动动态仿真建模,环境模型软件,34,30-43(2012)
[44] 加莱利,S。;Castelletti,A。;Goedbloed,A.,《城市水库水质和水量的高效综合控制》,水资源研究,51,9053-9072(2015)
[45] Brunton,S.L。;Proctor,J.L。;Kutz,J.N.,《通过非线性动力系统的稀疏识别从数据中发现控制方程》,《国家科学院学报》,113,15,3932-3937(2016)·Zbl 1355.94013号
[46] 院长,S。;马尼亚,H。;Matni,N。;Recht,B。;Tu,S.,关于线性二次调节器的样本复杂性,ArXiv e-prints(2017)
[47] 图,S。;Recht,B.,线性二次调节器的最小二乘时差学习,ArXiv e-prints(2017)
[48] 巴尔扎诺,L。;诺瓦克,R。;Recht,B.,《从高度不完整信息在线识别和跟踪子空间》,2010年第48届Allerton通信、控制和计算年会(Allerton),704-711(2010)
[49] 佩赫斯托弗,B。;Willcox,K.,《通过低阶更新对非线性系统进行在线自适应模型简化》,SIAM J Scient Compute,37,4,A2123-A2150(2015)·Zbl 1323.65102号
[50] 齐默尔曼,R。;佩赫斯托弗,B。;Willcox,K.,应用于在线自适应非线性模型简化的几何子空间更新,SIAM J Matrix Ana Appl,39,1,234-261(2018)·Zbl 1383.65034号
[51] 亚诺,M。;Penn,J.D。;Patera,A.T.,用于同时估计状态和模型偏差的模型数据弱公式,CR Math,351,23-24,937-941(2013)·Zbl 1281.65148号
[52] Maday,Y。;Patera,A。;Penn,J.D。;Yano,M.,PBDW状态估计:噪声观测;配置自适应背景空间;物理解释,ESAIM:Proc,50144-168(2015)·Zbl 1342.82116号
[53] E.J.帕里什。;Duraisamy,K.,《使用场反演和机器学习的数据驱动预测建模范式》,《计算物理杂志》,305758-774(2016)·Zbl 1349.76006号
[54] 辛格,A.P。;Duraisamy,K。;张志杰,利用场反演和机器学习增强湍流模型,第55届美国航空航天局航空科学会议。第55届AIAA航空航天科学会议,AIAA科学技术论坛,1-18(2017),美国航空航天研究所
[55] Lam,R。;Allaire,D。;Willcox,K.,《使用统计替代模型对非层次信息源进行多保真优化》,第56届AIAA/ASCE/AHS/ASC结构、结构动力学和材料会议,0143(2015)
[56] Poloczek,M。;Wang,J。;Frazier,P.,多信息源优化,神经信息处理系统进展,4291-4301(2017)
[57] Ghoreshi,S.F。;Allaire,D.L.,《使用知识梯度策略的基于融合的多信息源优化方法》(2018),美国航空航天研究所
[58] 佩赫斯托弗,B。;Willcox,K。;Gunzburg,M.,不确定性传播、推理和优化中的多理想方法综述,SIAM Rev(2018)·Zbl 1458.65003号
[59] Bishop,C.,模式识别和机器学习(2006),施普林格·Zbl 1107.68072号
[60] 哈斯蒂,T。;Tibshirani,R。;Friedman,J.,《统计学习的要素》(2009),施普林格出版社·兹比尔1273.62005
[61] Murphy,K.,《机器学习》(2012),麻省理工学院出版社·Zbl 1295.68003号
[62] Haykin,S.S.,《神经网络和学习机器》(2008),皮尔逊出版社
[63] 阿克塞利克,V。;Bielak,J。;比罗斯,G。;伊班氏线虫。;费尔南德斯,A。;Ghattas,O.,《太尺度计算机上的高分辨率正向和反向地震建模》,SC03:高性能计算、网络、存储和分析国际会议论文集(2003年),ACM/IEEE
[64] Rudi,J。;马洛西,A.C.I。;Isaac,T。;斯塔德勒,G。;Gurnis,M。;Ineichen,Y.,《复杂偏微分方程的极值尺度隐式解算器:地幔中的高度非均匀流》,SC15:高性能计算、网络、存储和分析国际会议论文集(2015),ACM
[65] Loéve,M.,概率论(1955),D.Van Nostrand公司:D.Van Nostrand公司,纽约·Zbl 0108.14202号
[66] Kosambi,D.,《函数空间中的统计》,《印度数学学会杂志》,第776-88页(1943年)·Zbl 0063.03317号
[67] Hotelling,H.,《用主成分分析统计变量复合体》,《教育心理学杂志》,24,第417-441498-520条(1933年)
[68] 北部,G。;贝尔·T。;卡哈兰,R。;Moeng,F.,经验正交函数估计中的抽样误差,Mon Weather Rev,110,7,699-706(1982)
[69] 拉加万,B。;Hamdaoui,M。;肖,M。;Breitkopf,P。;Villon,P.,使用修改的POD基和扩散近似进行结构优化的双层元建模方法,Comput Struct,127,19-28(2013)
[70] 霍尔,K。;托马斯·J·P。;Dowell,E.H.,跨声速非定常气动流动的适当正交分解技术,AIAA J,38,10,1853-1862(2000)
[71] 尼尔森,M.A.,《神经网络和深度学习》(2015),美国测定出版社
[72] Rumelhart,D.E。;辛顿,G.E。;Williams,R.J.,《通过反向传播错误学习表征》,《自然》,3236088533(1986)·Zbl 1369.68284号
[73] 利夫尼,R。;沙列夫·施瓦茨,S。;Shamir,O.,《关于训练神经网络的计算效率》,《神经信息处理系统的进展》,855-863(2014)
[74] Bentley,J.L.,用于关联搜索的多维二叉搜索树,Commun ACM,18,9,509-517(1975)·Zbl 0306.68061号
[75] 弗里德曼,J.H。;Bentley,J.L。;Finkel,R.A.,在对数期望时间内寻找最佳匹配的算法,ACM Trans Math Softw,3,3,209-226(1977)·Zbl 0364.68037号
[76] 布雷曼,L。;弗里德曼,J。;斯通,C.J。;Olshen,R.A.,《分类与回归树》(2017),CRC出版社
[77] 帕拉西奥斯,F。;科隆诺,M.R。;亚拉纳克。;Campos,A。;科普兰,S.R。;Economon,T.D.,斯坦福大学非结构化(SU2):用于多物理模拟和设计的开放源代码集成计算环境,第51届美国航空航天局航空科学会议,德克萨斯州葡萄藤,1-60(2013)
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。