update

2021-03-31 15:37:09 +08:00
parent 6a92f97138
commit b6f63a91bf
65 changed files with 1244 additions and 459 deletions
--- a/codes/HierarchicalDQN/README.md
+++ b/codes/HierarchicalDQN/README.md
@@ -0,0 +1,13 @@
+# Hierarchical DQN
+
+## 原理简介
+
+Hierarchical DQN是一种分层强化学习方法，与DQN相比增加了一个meta controller，
+
+![image-20210331153115575](assets/image-20210331153115575.png)
+
+即学习时，meta controller每次会生成一个goal，然后controller或者说下面的actor就会达到这个goal，直到done为止。这就相当于给agent增加了一个队长，队长擅长制定局部目标，指导agent前行，这样应对一些每回合步数较长或者稀疏奖励的问题会有所帮助。
+
+## 伪代码
+
+![image-20210331153542314](assets/image-20210331153542314.png)