最新的“随机过程+markov-chains”问题-数学堆栈交换

0 投票

0 答案

20 意见

如何证明一步转移矩阵的绝对收敛性？

我试图证明马尔可夫链中的n步转移矩阵满足每行之和为一的条件（即每行是一个有效的概率分布）。我已经做到了。。。

Azorbz公司

185

问6月12日19:55

0 投票

1 回答

31 意见

马尔可夫链详细余额$\pi（x）*P（x，y）=\pi$

假设我有一个马尔可夫链，它有一个表示为$P$的转移矩阵。$P$矩阵的$（行、列）$元素表示为$P（i，j）$。只需查看转换矩阵$P$。。。

PredsFan13型

11

问6月8日3:51

0 投票

1 回答

65 意见

这个马尔可夫链的平稳分布是什么？

链的转移矩阵为：$$\开始{bmatrix}0 & 1/3 & 2/3 & 0 & 0 & 0 & 0 & 0 \\2/3 & 0 & 1/3 & 0 & 0 & 0 & 0 & 0 \\1/3 & 0 ...

史蒂夫·M。

35

问6月3日18:31

0 投票

1 回答

33 意见

对于$a$的哪个值，这个马尔可夫链是不可约的和非周期的？

过渡矩阵为：$$\开始{bmatrix}a&1-a&0&0&0\\0 & 0 & 1 & 0 & 0\\1/2 & 0 & 0 & 0 & 1/2 \\0 & 0 & 1 & 0 & 0 \\0 &...

Steve M。

35

问6月2日20:07

0 投票

0 答案

18 意见

修正马尔可夫链

设$x_t，y_t$是具有非零转移概率和两个状态{0，1}的独立马尔可夫链$t$是一个正整数$x_0=0，y_0=1$。进程$a_t$定义为$a_t=c^{x_t}。。。

艺术Bac

1

问5月23日10:18

4 投票

1 回答

114 意见

圆形随机行走-马尔科夫蛙

假设一个统一圆上有$n$lily pads。时间$t=0$时，一只青蛙坐在其中一只青蛙身上。每分钟，这只青蛙都会跳到邻近的睡莲叶上，概率为$p=1/2$。查找。。。

用户147813

45

问5月22日19:13

0 投票

1 回答

23 意见

耦合相同连续时间马尔可夫链

在证明一个不可约的正递归CTMC$（X_t）_{t\ge0}$收敛于其不变分布$\nu$时，我的课堂讲稿研究了两个独立的。。。

黑加什

197

问5月21日21:43

0 投票

0 答案

13 意见

哈夫曼编码身份证源的输出过程

pmf$（p_1，\dots，p_m）$的二进制哈夫曼码是通过以所有$p_i$作为叶子开始，并通过合并概率最低的两个节点来迭代构造树来构造的。那么边是。。。

黑加什

197

问5月20日16:05

1 投票

0 答案

20 意见

连续时间马尔可夫链中进入和退出状态j的次数？

在概率模型简介中，它说$$v_jP_j=\sum_{k\nej}q_{kj}P_k，\text{所有状态j}$$和$$\sum_jP_j=1$$的解释是，在任何间隔（0，t）中。。。

雁鸣声

11

问5月13日3:13

1 投票

0 答案

29 意见

在$p$的值下，该链将是循环的？

考虑$\mathbb{Z}$上的马尔可夫链，其中$p_{i，i+2}=p$和$p_}i，i−1}=1−p$。在$p$的值下，该链将是循环的？我知道链对于任何状态$j都是循环的$$$\总和\。。。

AB缺失

582

问5月12日17:58

0 投票

1 回答

25 意见

不可约有限状态马尔可夫链中每个状态都必须是正流[闭]的初等证明

有没有一个基本的证据证明不可约的有限状态马尔可夫链中的每个状态都必须是正流的？我知道每一种状态都会反复出现，但我无法排除。。。

维也纳跳跃

155

问5月1日20:06

0 投票

0 答案

16 意见

离散生灭过程的弱遍历性

我试图通过Dobrushin系数来理解弱遍历性的标准。设$P（m，k）$是可数状态空间离散时间马尔可夫链的转移矩阵。弱遍历性。。。

康科普德

995

问5月1日19:47

0 投票

三答案

98 意见

自然数上随机游动的瞬时性。

设$X=（X_n）_{n\in\mathbb{n}}\sim\text{MC}（\lambda，P）$是自然数上的马尔可夫链，使得$\对于所有i\neq0，\，（P_{i，i+1}=2/3$和$P_{i，i-1}=1/3）$和$P_{0,1}=1$（每隔。。。

Choripán Con Pebre

2, 504

问4月25日23:58

0 投票

0 答案

34 意见

马尔可夫过程中局部时间的收敛速度是连续的。

根据Revuz和Yor在《连续鞅和布朗运动》一书中的定理3.12（p.427），他们声称对于具有不变测度$\mu$的Harris循环马尔可夫过程$X$，以及两个。。。

大安

362

问4月24日17:11

0 投票

1 回答

29 意见

团马尔可夫链中步数的方差

对于图形过渡图为：$$P=\开始{bmatrix}0&1/3和1/3&1/3 \\\\1/3&0和1/3&1/3\\\\1/3和1/3&0和1/3 \\\\ 1/3&1/3&1/3&1/3&0结束{bmatrix}$$如果$X$。。。

Sooraj S公司

7,654

问4月24日4:52

堆栈交换网络

所有问题

如何证明一步转移矩阵的绝对收敛性？

马尔可夫链详细余额$\pi（x）*P（x，y）=\pi$

这个马尔可夫链的平稳分布是什么？

对于$a$的哪个值，这个马尔可夫链是不可约的和非周期的？

修正马尔可夫链

圆形随机行走-马尔科夫蛙

耦合相同连续时间马尔可夫链

哈夫曼编码身份证源的输出过程

连续时间马尔可夫链中进入和退出状态j的次数？

在$p$的值下，该链将是循环的？

不可约有限状态马尔可夫链中每个状态都必须是正流[闭]的初等证明

离散生灭过程的弱遍历性

自然数上随机游动的瞬时性。

马尔可夫过程中局部时间的收敛速度是连续的。

团马尔可夫链中步数的方差

热门网络问题

所有问题

相关标签