跳到主要内容

标记为[markov-chains]的问题

离散(有限或可数无限)状态空间上的随机过程(具有离散或连续时间依赖性),其中下一个状态的分布仅取决于当前状态。对于连续状态空间上的马尔可夫过程,请改用(Markov-process)。

5,983问题
筛选依据
排序依据
标记为
2 投票
2 答案
119 意见

一个棋子在棋盘的田野上移动。兵访问所有字段后的移动次数的预期值。

棋子在下图中的棋盘区域内移动,在每次移动中,移动到与边或角相邻的一个区域(每个可用区域具有相同的概率。。。
offool的用户头像
  • 1,042
0 投票
2 答案
49 意见

棋子在正方形的顶点之间移动ABCD。典当第一次从点B移动到点C的预期移动次数。解决方案验证

棋子在方形$ABCD$的顶点之间移动,每次移动都会移动到相邻的顶点之一-每个顶点的选择很可能在不同的步骤中都是独立的。。。
offool的用户头像
  • 1,042
1 投票
1 回答
57 意见

兵沿着四面体$ABCD$的顶点移动。典当在达到$B$之前返回$A$的概率。解决方案验证。

棋子沿着四面体$ABCD$的顶点移动,每次移动都会移动到相邻的顶点之一(每种可能性都有$\frac{1}{6}$的机会),或者停留在原地(概率为$\frac{。。。
offool的用户头像
  • 1,042
-1 投票
0 答案
18 意见

马尔可夫链、图论和组合学的交集[闭合]

是否有与马尔可夫链、图论和组合学相关的研究领域?
Pat的用户头像
  • 116
2 投票
2 答案
91 意见

在允许停留在同一位置的广场边缘随机行走

求从正方形的一个角到另一个角的预期步数的经典问题。我发现了一种直观的方法,考虑到我们处于$(0,0)$位置,并且。。。
Axo的用户头像
  • 301
0 投票
0 答案
20 意见

如何证明一步转移矩阵的绝对收敛性?

我试图证明马尔可夫链中的n步转移矩阵满足每行之和为一的条件(即每行是一个有效的概率分布)。我已经做到了。。。
Azorbz的用户头像
0 投票
0 答案
29 意见

帮助证明“多体系统的数学和物理”中的Perron-Frobenius定理

在Hal Tasaki的《多体系统的数学和物理》一书中,他给出了Perron-Frobenius定理的一个版本的证明(见下文)。然而,我没有遵循(2)中的路线因为$u_i m_{。。。
JvT的用户头像
0 投票
0 答案
36 意见

二维有限状态马尔可夫链的边界概率与内概率的关系

在微积分中,格林定理将曲线周围的积分与曲线所包围的平面区域上的二重积分联系起来。这个定理在二维。。。
rrv的用户头像
0 投票
1 回答
31 意见

马尔可夫链详细余额$\pi(x)*P(x,y)=\pi$

假设我有一个马尔可夫链,它有一个表示为$P$的转移矩阵。$P$矩阵的$(行,列)$元素表示为$P(i,j)$。只需查看转换矩阵$P$。。。
PredsFan13的用户头像
0 投票
0 答案
10 意见

$q(\eta,\eta_x)$在什么意义上是$\eta$变为$\eta_x$的速率?(自旋系统)

设$S$是有限集,$E=\{0,1\}^S$。对于E$中的$\eta\和S$中的$1x\,让E$中$\eta_x\是通过“翻转”坐标$x$从$\eta获得的配置,保留另一个。。。
Filippo的用户头像
  • 3,582
0 投票
1 回答
65 意见

这个马尔可夫链的平稳分布是什么?

链的转移矩阵为:$$\开始{bmatrix}0 & 1/3 & 2/3 & 0 & 0 & 0 & 0 & 0 \\2/3 & 0 & 1/3 & 0 & 0 & 0 & 0 & 0 \\1/3 & 0 ...
Steve M.的用户头像
0 投票
1 回答
33 意见

对于$a$的哪个值,这个马尔可夫链是不可约的和非周期的?

过渡矩阵为:$$\开始{bmatrix}a&1-a&0&0&0\\0 & 0 & 1 & 0 & 0\\1/2 & 0 & 0 & 0 & 1/2 \\0 & 0 & 1 & 0 & 0 \\0 &...
Steve M.的用户头像
-1 投票
0 答案
49 意见

状态空间无限时如何使用马尔可夫链

我正在做这个练习:钢琴销售策略:根据过去的经验,一家商店平均每周只能销售一架钢琴。经理制定的存储策略是检查。。。
shwsq的用户头像
投票
0 答案
33 意见

使用后向生成器和半群的马尔可夫过程期望值

在过去的几天里,我一直在研究连续时间马尔可夫过程。我正在做一些练习,遇到了以下问题:考虑一个连续的马尔可夫过程。状态空间。。。
卢基·卢克的用户头像
1 投票
1 回答
31 意见

将一般停止时间分解为停止组件

设$(X_n)_{n\geq0}$是在有限状态空间$S$中取值的离散时间马尔可夫链,具有转移矩阵$P$。设$(mathcal F_n)_{n\geq0}$为自然过滤,设$\tau\。。。
Jeffrey Jao的用户头像

15 30 50 每页
1
2 4 5
399