在实验中观察到低维动力系统作为高维信号,例如混沌摆系统的视频。假设我们知道一些未知参数的动力学模型,我们能通过只测量一次其时间演化来估计底层系统的参数吗?执行此估计的关键信息在于信号和模型之间的时间相关性。我们提出了一个基于内核的分数来比较这些依赖关系。我们的分数将线性模型的最大似然估计推广到未知特征空间中的一般非线性设置。我们通过最大化建议分数来估计系统的基本参数。我们使用两个混沌动力学系统——双摆和Lorenz’63模型证明了该方法的准确性和效率。

1
F。
阿布拉莫维奇
年。
里托夫
,
统计理论:简介
(
出版社
,
2013
).
2
T。
阿科曼诺
,
一、。
苏纽格
,
J。
帕塔克
,
答:。
威克纳
,
B.R.公司。
狩猎
、和
E.公司。
奥特
, “
基于机器学习的全球大气预报模型
,”
地理位置。雷斯莱特。
47
,
e2020GL087776
(
2020
).
3
钢筋混凝土。
紫菀
,
B。
博切尔
、和
C.H.公司。
瑟伯
,
参数估计与反问题
(
爱思维尔
,
2018
).
4
美国。
阿特金森
,
西。
子公司
,
L。
,
G.公司。
可汗
,
第页。
哈维
、和
R。
加尼姆
,“自由形式控制微分方程的数据驱动发现,”arXiv:1910.05117(2019).
5
O。
阿泽科特
,
编号:B。
埃里克松
,
五、。
、和
M.W.公司。
马奥尼
,“使用一致的Koopman自动编码器预测序列数据”,《第37届机器学习国际会议论文集》(PMLR,2020),第475-485页,见http://proceedings.mlr.press/v119/azencot20a.html.
6
F.T.公司。
巴赫
M.I.公司。
乔丹
, “
核独立分量分析
,”
J.马赫。学习。物件。
,
1
——
48
(
2002
).
7
M。
贝尔金
第页。
尼约吉
, “
用于降维和数据表示的拉普拉斯特征映射
,”
神经计算。
15
,
1373
——
1396
(
2003
).
8
T。
拜尔陶隆
,
F。
迪特里希
,
一、。
梅齐克
、和
I.G.公司。
凯夫雷基迪斯
, “
从数据学习哈密顿系统
,”
混乱
29
,
121107
(
2020
).
9
医学学士。
布拉什科
答:。
格雷顿
,“使用核依赖度量进行分类推断”,Max-Planck-Insit技术报告第181号(2008年)。
10
J。
邦加德
H。
利普森
, “
非线性动力系统的自动逆向工程
,”
程序。国家。阿卡德。科学。美国。
104
,
9943
——
9948
(
2007
).
11
B。
靴子
G·J。
戈登
,“两流形问题及其在非线性系统辨识中的应用”,in机器学习国际会议论文集(Omnipress,2012)。
12
J·J。
布拉姆伯格
J.N.公司。
库茨
, “
多尺度物理发现的Poincré映射和非线性Floquet理论
,”
生理学D
408
,
132479
(
2020
).
13
B。
布鲁沃斯
,
答:。
比菲
,
M。
艾尔斯A
,
英国。
施瓦布
,
L。
科尔泰利尼
,
M。
罗梅罗J
、和
N。
戈尔茨坦J
, “
载脂蛋白E基因型预测脑叶出血血肿扩大
,”
(打、击等的)一下
43
(
6
),
1490
——
1495
(
2012
).
14
B。
布鲁沃斯
,
年。
,
J。
Falcone公司
,
十、。
,
M。
艾尔斯
,
T。
电池
,
答:。
瓦什凯维奇
,
英国。
麦克纳马拉
,
五、。
瓦兰特
、和
英国。
施瓦布
, “
预测原发性脑出血后血肿扩大
,”
JAMA Neurol公司。
71
,
158
——
164
(
2014
).
15
S.L.公司。
布伦顿
,
J·L·。
普罗克托
、和
J.N.公司。
库茨
, “
通过非线性动力系统的稀疏辨识从数据中发现控制方程
,”
程序。国家。阿卡德。科学。美国。
113
,
3932
——
3937
(
2016
).
16
右侧。
伯德
,
机械工程师。
赫里巴尔
、和
J。
诺塞达尔
, “
大规模非线性规划的内点算法
,”
SIAM J.Optim公司。
9
,
877
——
900
(
1999
).
17
右侧。
伯德
,
J.C.公司。
吉尔伯特
、和
J。
诺塞达尔
, “
基于内点技术的非线性规划信赖域方法
,”
数学。程序。
89
,
149
——
185
(
2000
).
18
英国。
冠军
,
B。
露西(Lusch)
,
J.N.公司。
库茨
、和
S.L.公司。
布伦顿
, “
数据驱动的坐标和控制方程发现
,”
程序。国家。阿卡德。科学。美国。
116
,
22445
——
22451
(
2019
).
19
答:。
查鲁
,
答:。
辛内堡
、和
D。
凯姆
,“关于高维空间中距离度量的惊人行为”,in国际数据库理论会议(施普林格,柏林,2001年)。
20
E.公司。
克利里
,
答:。
加布诺-伊尼戈
,
美国。
局域网
,
T。
施耐德
、和
上午。
斯图亚特
,“校准、模拟、采样”
J.公司。物理学。
424
,
109716
(
2021
).
21
共和国。
夸夫曼
美国。
拉丰
, “
扩散贴图
,”
申请。计算。危害。分析。
21
,
5
——
30
(
2006
).
22
C、。
科尔特斯
,
M。
梅赫亚尔
、和
R。
阿夫欣
, “
基于中心对齐的核学习算法
科琳娜·科尔特斯、梅赫亚尔·莫赫里、阿夫申·罗斯塔米扎德“
J.马赫。学习。物件。
13
(
1
),
795
——
828
(
2019
).
23
M。
起重机
,
答:。
桑切斯·冈萨雷斯
,
第页。
巴塔利亚
,
R。
,
英国。
起重机
,
D。
斯佩格
、和
美国。
,“利用归纳偏见从深度学习中发现符号模型”神经信息处理系统的进展33(NeurIPS 2020),参见https://proceedings.neurips.cc/paper/2020/hash/c9f2f917078bd2db12f23c3b413d9cba-Abstract.html.
24
D.L.公司。
多诺霍
C、。
格里姆斯
, “
Hessian特征映射:高维数据的局部线性嵌入技术
,”
程序。国家。阿卡德。科学。美国。
100
,
5591
——
5596
(
2003
).
25
C.J.公司。
迪尔瓦
,
R。
塔尔蒙
,
共和国。
夸夫曼
、和
I.G.公司。
凯夫雷基迪斯
, “
非线性动力系统流形学习的简约表示:趋化性案例研究
,”
申请。计算。哈蒙。分析。
44
,
759
——
773
(
2018
).
26
C.J.公司。
迪尔瓦
,
R。
塔尔蒙
,
C.W.公司。
齿轮
,
共和国。
夸夫曼
、和
I.G.公司。
凯夫雷基迪斯
, “
一类多尺度快-慢随机动力系统的数据驱动约简
,”
SIAM J.应用。动态。系统。
15
,
1327
——
1351
(
2016
).
27
第页。
杜布瓦
,
T。
戈麦斯
,
L。
普朗卡特
、和
L。
佩雷特
, “
洛伦兹系统的数据驱动预测
,”
生理学D
408
,
132495
(
2020
).
28
N。
邓福德
J.T.公司。
施瓦茨
,
线性算子,第一部分
(
威利
,
纽约
,
1958
).
29
M。
费希尔
, “
高血压脑出血的病理观察
,”
神经病理学杂志。实验神经学。
30
,
536
——
550
(
1971
).
30
英国。
福水
,
F.R.公司。
巴赫
、和
答:。
格雷顿
, “
核典型相关分析的统计一致性
,”
J.马赫。学习。物件。
8
,
361
——
383
(
2007
).
31
英国。
福水
,
答:。
格雷顿
,
十、。
太阳
、和
B。
舍尔科夫
,“条件依赖的核心度量”,in神经信息处理研究进展(Curran Associates Inc.,2008年),第489–496页。
32
答:。
格雷顿
,
O。
布斯克
,
答:。
斯莫拉
、和
B。
舍尔科夫
,《使用希尔伯特-施密特规范测量统计相关性》,in算法学习理论国际会议(柏林施普林格出版社,2005年),第63-77页。
33
答:。
格雷顿
,
R。
赫布里希
,
A.J.公司。
斯莫拉
,
O。
布斯克
、和
B。
舍尔克夫
, “
测量独立性的核方法
,”
J.马赫。学习。物件。
6
,
2075
——
2129
(
2005
).
34
答:。
格雷顿
,
英国。
福美佐
,
C.H.公司。
特奥
,
英国。
歌曲
,
B。
舍尔科夫
、和
A.J.公司。
斯莫拉
,“独立性的内核统计测试”,in神经信息处理研究进展(Curran Associates Inc.,2008年),第585-592页。
35
答:。
辛内堡
,
答:。
查鲁
、和
D。
凯姆
中的“高维空间中最近的邻居是什么?”第26届超大数据库国际会议(摩根考夫曼出版公司,2000年)。
36
T。
霍夫曼
,
B。
舍尔科夫
、和
A.J.公司。
斯莫拉
, “
机器学习中的核方法
,”
安。统计师。
36
,
1171
——
1220
(
2008
).
37
答:。
伊瑟利斯
,
微分方程数值分析的第一门课程
(
剑桥大学
,
2009
).
38
右侧。
凯勒
问:。
,“使用线性多步方法发现动力学,”
SIAM J.数字。分析。
59
,
429–455
(
2020
).
39
美国。
拉丰
,
年。
凯勒
、和
R。
夸夫曼
, “
基于扩散映射的数据融合与多用户数据匹配
,”
IEEE传输。模式分析。机器。智力。
28
(
11
),
1784
——
1797
(
2006
).
40
拉丁美洲。
朗道
电子显微镜。
利夫希茨
,
理论物理、力学课程
(
佩加蒙
,
牛津
,
1980
),第1卷。
41
L。
,
J。
,
年。
、和
J。
普里斯特利
,“深度核:使用深度神经网络从数据中学习核函数”,in第三届IEEE/ACM国际大数据计算、应用和技术会议记录(计算机协会(ACM),2016年)。
42
共和国。
莱德曼
R。
塔尔蒙
, “
使用交替扩散学习公共潜在变量的几何结构
,”
申请。计算。危害。分析。
44
,
509
——
536
(
2018
).
43
O。
林登鲍姆
,
M。
萨尔霍夫
,
答:。
耶雷多尔
、和
答:。
埃弗巴克
, “
流形学习和分类的高斯带宽选择
,”
数据最小知识。发现。
34
,
1
——
37
(
2020
).
44
O。
林登鲍姆
,
答:。
耶雷多尔
,
M。
萨尔霍夫
、和
答:。
埃弗巴克
, “
多视图扩散贴图
,”
信息融合
55
,
127
——
149
(
2020
).
45
中心-中心。
线路接口单元
,
年。
,
D。
,
问:。
、和
S.J.L.公司。
开票人
, “
使用机器学习方法从原子对分布函数确定结构的空间群
,”
《水晶学报》。
A75型
,
633
——
643
(
2019
).
46
埃及。
洛伦茨
, “
确定性非周期流
,”
J.大气。科学。
20
,
130
——
141
(
1963
).
47
T。
迈克尔
,
西。
、和
英国。
利韦斯库
,“非参数典型相关分析”,in机器学习国际会议(JMLR.org,2016),第1967–1976页。
48
五、五。
阮(Nguyen)
E.F.公司。
木材
, “
线性可识别性概念的回顾与统一
,”
SIAM版本。
24
,
34
——
51
(
1982
).
49
J。
诺塞达尔
S.J.公司。
赖特
,
数值优化
(
施普林格
,
纽约
,
2006
).
50
H。
奥瓦迪
G.R.公司。
, “
内核流:从数据学习内核到深渊
,”
J.计算。物理学。
389
,
22
——
47
(
2019
).
51
J。
帕塔克
,
B。
狩猎
,
M。
吉尔万
,
Z.公司。
、和
E.公司。
奥特
, “
基于数据的大型时空混沌系统的无模型预测:一种水库计算方法
,”
物理学。修订稿。
120
,
024102
(
2018
).
52
美国。
Saitoh公司
,
再生核理论及其应用
(
朗曼科技
,
哈洛
,
1988
).
53
M。
萨尔霍夫
,
O。
林登鲍姆
,
年。
艾森巴德
,
答:。
西尔伯沙茨
,
年。
什科尔尼斯基
、和
答:。
埃弗巴克
, “
用于数据分析的多视图内核共识
,”
申请。计算。哈蒙。分析。
49
(
1
),
208
——
228
(
2020
).
54
B。
舍尔科夫
,
答:。
斯莫拉
、和
K.-S.公司。
米勒
, “
作为核特征值问题的非线性分量分析
,”
神经计算。
10
,
1299
——
1319
(
1998
).
55
J。
肖·泰勒
N。
克里斯蒂亚尼尼
,
模式分析的核方法
(
剑桥大学
,
2004
).
56
T。
Shinbrot公司
,
C、。
格雷博吉
,
J。
智慧
、和
J.A.公司。
约克
, “
双摆中的混沌
,”
美国物理学杂志。
60
,
491
——
499
(
1992
).
57
G.公司。
舒尔金
,
L。
霍雷什
、和
H。
艾夫龙
, “
错位动力学模型非参数校正的实验设计
,”
SIAM/ASA J.不确定性。数量。
6
,
880
——
906
(
2018
).
58
答:。
歌手
,
R。
埃尔班
,
一、。
凯夫雷基迪斯
、和
共和国。
夸夫曼
, “
用各向异性扩散映射检测随机动力系统中的固有慢变量
,”
程序。国家。阿卡德。科学。美国。
106
,
16090
——
16095
(
2009
).
59
A.J.公司。
斯莫拉
B。
舍尔科夫
,
用内核学习
(
GMD-Forschungszentrum信息技术
,
1998
),第4卷。
60
B。
索伯
D。
莱文
,“移动最小二乘投影的流形近似(MMLS),”
建造。大约。
52
,
433–478
(
2020
).
61
上午。
斯图亚特
, “
反问题:贝叶斯观点
,”
Acta编号。
19
,
451
——
559
(
2010
).
62
R。
塔尔蒙
共和国。
夸夫曼
, “
非线性建模和时间序列滤波的经验内禀几何
,”
程序。国家。阿卡德。科学。美国。
110
,
12535
——
12540
(
2013
).
63
M。
Vestner公司
,
R。
利特曼
,
答:。
罗多拉
,
M。
布龙斯坦
、和
D。
克雷默斯
,“乘积流形滤波器:通过乘积空间中的核密度估计实现非刚性形状对应”,in计算机视觉和模式识别进展(IEEE,2017)。
64
A.F.公司。
维拉韦德
, “
非线性生物系统的可观测性和结构可识别性
,”
复杂性
2019
,
8497093
.
65
注册会计师。
华尔兹
,
J·L·。
莫拉莱斯
,
J。
诺塞达尔
、和
D。
奥尔班
, “
一种结合线搜索和信赖域步长的非线性优化内点算法
,”
数学。程序。
107
,
391
——
408
(
2006
).
66
D。
,
L。
、和
J。
,“近似k近邻图构造的快速算法”,inIEEE第13届国际数据挖掘研讨会(IEEE,2013),第349-356页。
67
答:。
威克纳
,
J。
帕塔克
,
B.R.公司。
狩猎
,
M。
吉尔万
,
T。
阿科曼诺
,
一、。
苏纽格
,
答:。
波默朗斯
、和
E.公司。
奥特
, “
将机器学习与基于知识的建模相结合,用于大型复杂时空系统的可扩展预测和次脊尺度闭合
,”
混乱
30
,
053111
(
2020
).
68
管理办公室。
威廉姆斯
,
例如。
凯夫雷基迪斯
、和
C.W.公司。
罗利
, “
Koopman算子的数据驱动近似:扩展动态模式分解
,”
非线性科学杂志。
25
,
1307
——
1346
(
2015
).
69
O。
耶尔
,
R。
塔尔蒙
,
共和国。
夸夫曼
、和
I.G.公司。
凯夫雷基迪斯
, “
通过从数据中学习知情的观测几何来重建正常形式
,”
程序。国家。阿卡德。科学。美国。
114
,
E7865型
——
E7874型
(
2017
).
70
J。
J.S.公司。
赫斯塔文
, “
基于人工神经网络的流场重建方法
,”
美国汽车协会J。
57
,
482
——
498
(
2019
).
71
L。
泽尼克·马诺
第页。
佩罗娜
,“自校正谱聚类”,in神经信息处理系统研究进展(麻省理工出版社,2004年),第1601–1608页。
72
O。
耶尔
,
F。
迪特里希
,
R。
穆莱奥夫
,
R。
塔尔蒙
、和
I.G.公司。
凯夫雷基迪斯
,“多模态数据联合平滑特征的光谱发现”arXiv:2004.04386,2020
73
答:。
假日
,
M。
Kooshkbaghi公司
,
J·M·。
贝洛·里瓦斯
,
C.W.公司。
齿轮
,
答:。
扎加里斯
、和
I.G.公司。
凯夫雷基迪斯
, “
用于参数简化的流形学习
,”
J.计算。物理学。
392
,
419
——
431
(
2019
).
74
没有必要G公司在所有R(右)d日,但刚刚开始ωΩ{x个(t吨;ω)|t吨0}此外,在我们的分析和示例中,通常Z轴是模型的空间R(右)d日或观测空间R(右).
75
内核k个x个k个通常是原始空间中的内积R(右)d日R(右),因为它们在任何一个分量中都不是线性的。
76
通常情况下ω值超出Ω,基础ODE无法生成适定解。例如,谐振子x个¨(t吨)+ωx个=0对于ω<0产生指数增长和不适定解。
77
在我们的模拟中,我们使用了MATLAB软件的IPA方法的实现。
78
这种精确形式的G公司并不特别重要,只是它确实是非线性的,并且包含了所有x个的坐标。对其他观测函数进行了测试,得出了与我们的算法类似的结果(结果未显示)。
79
我们观察到β8/,许多不同的参数集产生了几乎无法区分的轨迹,从而阻碍了可观测性(参见第。IV C类).
您当前无权访问此内容。