×

RPINNs:用于求解平稳偏微分方程的校正物理信息神经网络。 (英语) Zbl 1521.68199号

摘要:由于高性能计算的发展,深度学习算法在计算数学等许多领域取得了重大进展。基于物理信息的神经网络为解决偏微分方程的一系列正问题和反问题提出了一种创新思路。受物理信息神经网络和多重网格方法的启发,我们将物理信息神经网数值解的梯度信息引入到新的神经网络中,并提出了用于求解平稳偏微分方程的修正物理信息网络。为了解决神经网络的多目标优化问题,采用动态权值策略来平衡损失函数项之间的数值差异,有效缓解梯度病态现象。最后,我们进行了一系列数值实验,验证了RPINN方法的有效性,该方法结合了动态权重策略以提高计算精度。

MSC公司:

68T07型 人工神经网络与深度学习
65千5 数值数学规划方法
65M99型 偏微分方程、初值和含时初边值问题的数值方法
PDF格式BibTeX公司 XML格式引用
全文: 内政部

参考文献:

[1] Krizhevsky,A。;Sutskever,I。;Hinton,G.E.,深度卷积神经网络的Imagenet分类,Adv neural Inf Process Syst,25(2012)
[2] 巴尔迪,P。;萨多夫斯基,P。;怀特森,D.,《通过深度学习在高能物理中寻找奇异粒子》,《自然通讯》,第5、1、1-9页(2014年)
[3] LeCun,Y。;Bengio,Y.,《图像、语音和时间序列的卷积网络》(《大脑理论和神经网络手册》,第3361卷(1995年))
[4] 康多,R。;儿子,H.T。;Pan,H.,学习图的协变合成网络(2018),arXiv预印本arXiv:1801.02144
[5] Krizhevsky,A。;Sutskever,I。;Hinton,G.E.,深度卷积神经网络的Imagenet分类,Adv neural Inf Process Syst,25(2012)
[6] 西尔弗·D。;Schrittwieser,J。;Simonyan,K.,《在没有人类知识的情况下掌握围棋游戏》,《自然》,550,7676,354-359(2017)
[7] 王,S。;Teng,Y。;Perdikaris,P.,《理解和缓解物理信息神经网络中的梯度流病理学》,SIAM科学计算杂志,43,5,A3055-A3081(2021)·Zbl 1530.68232号
[8] 达本,J。;Langlois,G.P。;Meng,T.,通过神经网络结构克服某些Hamilton-Jacobi偏微分方程的维数灾难,Res Math Sci,7,3,1-50(2020)·Zbl 1445.35119号
[9] Darbon,J。;Meng,T.,关于能够表示某些高维Hamilton-Jacobi偏微分方程粘性解的一些神经网络结构,《计算物理杂志》,425,第109907页,(2021)·Zbl 07508503号
[10] 莱斯,M。;佩迪卡里斯,P。;Karniadakis,G.E.,《基于物理的深度学习(第一部分):非线性偏微分方程的数据驱动解》(2017),arXiv预印本arXiv:1711.10561
[11] 莱斯,M。;佩迪卡里斯,P。;Karniadakis,G.E.,《物理学为基础的深度学习》(第二部分):非线性偏微分方程的数据驱动解(2017),arXiv预印本arXiv:1711.10561
[12] Raissi先生。;佩迪卡里斯,P。;Karniadakis,G.E.,《基于物理的神经网络:解决非线性偏微分方程正问题和逆问题的深度学习框架》,《计算物理杂志》,378,686-707(2019)·Zbl 1415.68175号
[13] 卢,L。;X孟。;Mao,Z.,DeepXDE:解微分方程的深度学习库,SIAM Rev,63,1,208-228(2021)·Zbl 1459.65002号
[14] 金,X。;蔡,S。;Li,H.,NSFnets(Navier-Stokes流网):不可压缩Navier-Stokes方程的物理信息神经网络,计算物理杂志,426,第109951页,(2021)·Zbl 07510065号
[15] Wessels,H。;恩费尔斯,C.魏。;Wriggers,P.,《神经粒子方法——一种更新的拉格朗日物理学为计算流体动力学提供了神经网络》,《计算方法应用-机械工程》,368,第113127页,(2020)·Zbl 1506.76136号
[16] 基萨斯,G。;Yang,Y。;Hwuang,E.,《心血管血流建模中的机器学习:使用物理信息神经网络从非侵入性4D流MRI数据预测动脉血压》,《计算方法应用机械工程》,358,第112623页,(2020年)·Zbl 1441.76149号
[17] 德维维迪,V。;北卡罗来纳州帕拉沙尔。;Srinivasan,B.,用于偏微分方程数据高效解决方案的分布式物理通知神经网络(2019),arXiv预印本arXiv:1907.08967
[18] Kharazmi,E。;张,Z。;Karniadakis,G.E.,解偏微分方程的变分物理信息神经网络(2019),arXiv预印本arXiv:1912.00873
[19] 米什拉,S。;Molinaro,R.,《物理信息神经网络用于近似PDE的泛化误差估计》,IMA J Numer Anal(2022)·Zbl 07524707号
[20] De Ryck,T。;Mishra,S.,近似Kolmogorov PDEs的物理信息神经网络(PINN)误差分析(2021),arXiv预印本arXiv:2106.14473
[21] Shin,Y。;Darbon,J。;Karniadakis,G.E.,关于线性二阶椭圆和抛物线型偏微分方程的物理信息神经网络的收敛性(2020),arXiv预印本arXiv:2004.01806·兹比尔1473.65349
[22] Lanthaler,S。;米什拉,S。;Karniadakis,G.E.,《深度网的误差估计:无限维深度学习框架》,Trans Math Appl,6,1,tnac001(2022)·Zbl 07525076号
[23] 雅各特,A。;加布里埃尔,F。;Hongler,C.,《神经切线核:神经网络中的收敛和泛化》,Adv Neural Inf Process Syst,31(2018)
[24] Margossian,C.C.,《自动分化及其有效实施的回顾》,Wiley Interdiscip Rev Data Min Knowl Discov,9,4,1305(2019)
[25] Stein,M.,使用拉丁超立方体采样的模拟大样本特性,技术计量学,29,2,143-151(1987)·Zbl 0627.62010号
[26] Kingma,D.P。;Ba,J.,Adam:随机优化方法(2014),arXiv预印本arXiv:1412.6980
[27] 伯德·R·H。;卢,P。;Nocedal,J.,边界约束优化的有限内存算法,SIAM科学计算杂志,16,5,1190-1208(1995)·Zbl 0836.65080号
[28] Glorot X,Bengio Y.理解训练深度前馈神经网络的难度。摘自:第十三届人工智能和统计国际会议记录。JMLR研讨会和会议记录。2010年,第249-56页。
[29] 王,S。;Yu,X。;Perdikaris,P.,《PINN何时以及为何无法训练:神经切线内核视角》,《计算物理杂志》,449,第110768页,(2022)·Zbl 07524768号
[30] Ronen,B。;雅各布斯,D。;Kasten,Y.,不同频率学习函数的神经网络收敛速度,Adv neural Inf Process Syst,32(2019)
[31] Nédélec,J.C.,《声学和电磁方程:谐波问题的积分表示》(2001),施普林格科学与商业媒体·Zbl 0981.35002号
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。