摘要
Deavours，D.D.和Sanders，W.H.，1998年。 一种求解大型马尔可夫模型的有效的基于磁盘的工具。 绩效评估33，67--84。 谷歌学者 
Glasserman，P.、Heidelberger，P.，Shahabuddin，P.和Zajic，T.，1999年。 用于估计罕见事件概率的多级分裂。 操作。 第47、4、585--600号决议。 谷歌学者 格拉斯曼，W.K.1987。 出生-死亡过程中时间平均值的渐近方差。 《概率建模中的统计和计算问题》，第2部分，S.L.Albin和C.M.Harris，《运筹学编年史》，第8卷。 Balzers AG，瑞士巴塞尔，165-174。 谷歌学者 Grassmann，W.K.，1993年。 马尔可夫报酬系统中的均值和方差。 《线性代数、马尔可夫链和排队模型》，C.D.Meyer和R.J.Plemmons主编，《数学及其应用的IMA卷》，第48卷。 施普林格-弗拉格，纽约，193-204。 谷歌学者 Grassmann，W.K.，Chen，X.和Kashyap，B.R.2001。 稳态状态下状态相关M/G/1队列的最优服务速率。 操作。 Res.Letters回复函29，57--63。 谷歌学者 Grassmann，W.K.和Heyman，D.P.，1990年。 具有重复行的块结构马尔可夫链的均衡分布。 J.应用。 探针。 27, 557--576. 谷歌学者 Grassmann，W.K.和Stanford，D.A.，1999年。 矩阵分析法。 《计算概率》，W.K.Grassmann主编，《运筹学与管理科学国际丛书》，第24卷。 Kluwer学术出版社，波士顿，153-203。 谷歌学者 Grassmann，W.K.、Taksar，M.和Heyman，D.P.，1993年。 马尔可夫链的再生分析和稳态分布。 操作。 第33、1107--1117号决议。 谷歌学者 格林鲍姆，A.1997。 求解线性系统的迭代方法。 应用数学的前沿。 宾夕法尼亚州费城SIAM。 谷歌学者 Hasslinger，G.2000。 通过Wiener-Hopf因子分解分析服务器的等待时间、繁忙时段和输出模型。 性能评估。 40、1-3、1-26。 谷歌学者 海德堡，P.1995。 排队和可靠性模型中罕见事件的快速模拟。 ACM事务处理。 模型。 计算。 西姆。 5, 1, 43--85. 谷歌学者 Hordiijk，A.、Iglehart，D.L.和Schassberger，R.，1976年。 模拟连续时间马尔可夫链的离散方法。 高级申请。 探针。 13, 772--788. 谷歌学者 詹金斯，J.H.1972年。 简单队列中平均等待时间的直接和最大似然估计的相对效率，M/M/1。 J.应用。 探针。 9, 396--401. 谷歌学者 Kioussis，L.C.和Miller，D.R.1983年。 模拟有限任务期间复杂系统退化和故障的重要采样方案。 在冬季模拟会议上，S.D.Roberts、J.Banks和B.Schmeiser，Eds.Society for Computer Simulation，IEEE，La Jolla，Ca 92038，631-639。 谷歌学者 Madansky，A.1976年。 模拟问题的最佳条件。 操作。 第24、572--577号决议。 谷歌学者 Neuts，M.F.1981年。 随机模型中的矩阵几何解，算法方法。 约翰·霍普金斯大学出版社，巴尔的摩。 谷歌学者 Neuts，M.F.1989年。 M/G/1型结构随机矩阵及其应用。 马塞尔·德克尔（Marcel Dekker），纽约。 谷歌学者 Parzen，E.1962年。 随机过程。 Holden Day，旧金山。 谷歌学者 雷诺兹，J.F.1972。 关于马尔可夫链协方差结构的一些定理。 J.应用。 探针。 9, 214--218. 谷歌学者 Stewart，W.，1994年。 马尔可夫链数值解简介。 普林斯顿大学出版社，新泽西州。 谷歌学者 Tan，B.1999年。 产量随时间的变化：生产线动态。 EJOR第117、470--484页。 谷歌学者 van Moorsel，A.P.A.、Kant，L.A.和Sanders，W.H.，1996年。 马尔可夫报酬模型模拟的渐近偏差和方差的计算。 第29届模拟研讨会论文集，T.F.Znati和P.A.Wilsey，IEEE编辑，路易斯安那州新奥尔良，173-181。 谷歌学者
建议
连续空间中报酬收集马尔可夫过程的控制器综合 HSCC’17：第20届混合系统国际会议论文集：计算与控制 我们提出并分析了一个在连续空间、动态环境中优化奖励的通用数学模型，称为奖励收集马尔可夫过程。 我们的模型是由机器人中的请求服务应用程序驱动的，其目标是。。。
