Merge branch 'master' of https://github.com/datawhalechina/easy-rl

docs/errata.md

@@ -7,6 +7,11 @@
   * 王琦：中国科学院大学硕士在读 → 中国科学院大学硕士
   * 杨毅远：清华大学硕士在读 → 清华大学硕士
   * 江季：北京大学硕士在读 → 北京大学硕士
+* 10页，图1.11上面一段第2行：图1.12左边的智能体 → 图1.11左边的智能体
+* 35页的图2.2 和 41页的图2.5（a）添加从 $s_1$ 到 $s_4$  的箭头，替换成下图：
+
+![](res/Markov_chain.png ':size=350')
+
 * 38页，式(2.7)下面一段第1行：$s^{\prime}$ 可以看成未来的所有状态 → $s^{\prime}$ 可以看成未来的某个状态
 * 38页，式(2.7)下面一段第2行：未来某一个状态的价值 → 未来某个状态的价值 
 * 52页，第二段修改为：
@@ -30,6 +35,8 @@
 ![](res/4-19.png ':size=550')
 
 * 134页，式(5.16)下面一段第2行：最大化式 (5.16) → 最大化式 (5.15)
+* 165页，第一段的第4行到第5行：归一化的向量为 $[3,-1,2]^{\mathrm{T}}$ → 归一化的向量为 $[3,-1,-2]^{\mathrm{T}}$ 
+* 165页，第二段的第1行：向量 $[3,-1,2]^{\mathrm{T}}$ 中的每个元素 → 向量 $[3,-1,-2]^{\mathrm{T}}$ 中的每个元素 
 * 189页，图9.4替换成下图：
 
 ![](res/9-4.png ':size=550')