From 99d1f9096dfb71ad5f684984b765026d42cb3160 Mon Sep 17 00:00:00 2001 From: olianate <51022040+olianate@users.noreply.github.com> Date: Thu, 27 Oct 2022 11:19:30 +0800 Subject: [PATCH] =?UTF-8?q?=E6=9B=B4=E6=AD=A3=E5=9B=BE=E4=BE=8B=E6=8C=87?= =?UTF-8?q?=E7=A4=BA=E9=94=99=E8=AF=AF?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit --- docs/chapter2/chapter2.md | 2 +- 1 file changed, 1 insertion(+), 1 deletion(-) diff --git a/docs/chapter2/chapter2.md b/docs/chapter2/chapter2.md index e8fdfe7..d32c1d1 100644 --- a/docs/chapter2/chapter2.md +++ b/docs/chapter2/chapter2.md @@ -44,7 +44,7 @@ $$ 状态转移矩阵类似于条件概率(conditional probability),它表示当我们知道当前我们在状态 $s_t$ 时,到达下面所有状态的概率。所以它的每一行描述的是从一个节点到达所有其他节点的概率。 ### 2.1.3 马尔可夫过程的例子 -图 2.2 所示为一个马尔可夫过程的例子,这里有七个状态。比如从 $s_1$ 开始,它有0.4的概率到 $s_2$ ,有 0.6 的概率留在当前的状态。 $s_2$ 有 0.4 的概率到$s_1$,有 0.4 的概率到 $s_3$ ,另外有 0.2 的概率留在当前状态。所以给定状态转移的马尔可夫链后,我们可以对这个链进行采样,这样就会得到一串轨迹。例如,假设我们从状态 $s_3$ 开始,可以得到3个轨迹: +图 2.3 所示为一个马尔可夫过程的例子,这里有七个状态。比如从 $s_1$ 开始,它有0.4的概率到 $s_2$ ,有 0.6 的概率留在当前的状态。 $s_2$ 有 0.4 的概率到$s_1$,有 0.4 的概率到 $s_3$ ,另外有 0.2 的概率留在当前状态。所以给定状态转移的马尔可夫链后,我们可以对这个链进行采样,这样就会得到一串轨迹。例如,假设我们从状态 $s_3$ 开始,可以得到3个轨迹: * $s_3, s_4, s_5, s_6, s_6$; * $s_3, s_2, s_3, s_2, s_1$; * $s_3, s_4, s_4, s_5, s_5$。