bacow/easy-rl
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity

更新算法模版

Browse Source
This commit is contained in:
johnjim0816
2022-11-06 12:15:36 +08:00
parent 466a17707f
commit dc78698262
256 changed files with 17282 additions and 10229 deletions
Download Patch File Download Diff File Expand all files Collapse all files

BIN
projects/codes/Sarsa/Train_Racetrack-v0_Sarsa_20221030-021315/results/learning_curve.png Normal file
View File

Binary file not shown.
Side by Side

After

Width:  |  Height:  |  Size: 56 KiB

401
projects/codes/Sarsa/Train_Racetrack-v0_Sarsa_20221030-021315/results/res.csv Normal file
View File

@@ -0,0 +1,401 @@
episodes,rewards,steps
0,-870,200
1,-740,200
2,-710,200
3,-600,200
4,-580,200
5,-620,200
6,-590,200
7,-590,200
8,-520,200
9,-570,200
10,-580,200
11,-580,200
12,-500,200
13,-540,200
14,-510,200
15,-570,200
16,-560,200
17,-540,200
18,-490,200
19,-490,200
20,-530,200
21,-520,200
22,-530,200
23,-520,200
24,-500,200
25,-510,200
26,-520,200
27,-530,200
28,-560,200
29,-490,200
30,-530,200
31,-359,149
32,-470,200
33,-510,200
34,-520,200
35,-500,200
36,-540,200
37,-560,200
38,-500,200
39,-480,200
40,-490,200
41,-480,200
42,-540,200
43,-500,200
44,-500,200
45,-480,200
46,-550,200
47,-490,200
48,-540,200
49,-420,200
50,-530,200
51,-510,200
52,-530,200
53,-460,200
54,-480,200
55,-480,200
56,-470,200
57,-490,200
58,-470,200
59,-500,200
60,-500,200
61,-480,200
62,-450,200
63,-490,200
64,-420,200
65,-480,200
66,-440,200
67,-490,200
68,-188,88
69,-327,167
70,-530,200
71,-48,28
72,-460,200
73,-460,200
74,-25,25
75,-428,178
76,-460,200
77,-341,151
78,-480,200
79,-346,156
80,-34,24
81,-480,200
82,-480,200
83,-222,112
84,-470,200
85,-409,169
86,-139,59
87,-520,200
88,-108,58
89,-3,13
90,-131,71
91,-355,145
92,-470,200
93,-450,200
94,-490,200
95,-425,185
96,-130,70
97,-246,116
98,-480,200
99,-500,200
100,-13,13
101,-63,33
102,-311,131
103,-450,200
104,-520,200
105,-430,200
106,-79,39
107,-94,44
108,-37,27
109,-235,115
110,-440,200
111,-19,19
112,-424,194
113,-470,200
114,-344,164
115,-307,147
116,-82,52
117,-387,177
118,-500,200
119,-315,145
120,-289,119
121,-139,79
122,-392,192
123,-13,13
124,-35,25
125,-82,42
126,-134,64
127,-93,53
128,2,8
129,-212,102
130,-87,47
131,-70,40
132,-109,49
133,-77,47
134,-17,17
135,-118,58
136,-132,62
137,-76,36
138,-93,63
139,-357,157
140,-129,69
141,-46,26
142,-60,30
143,-339,159
144,-10,10
145,-164,84
146,-145,75
147,-53,33
148,-3,13
149,-55,35
150,-398,178
151,3,7
152,-20,20
153,-354,154
154,-439,189
155,-122,62
156,-80,40
157,-29,19
158,-185,85
159,-354,154
160,-35,25
161,-132,62
162,-155,75
163,-261,111
164,3,7
165,-135,65
166,-57,37
167,-432,182
168,-63,33
169,-119,59
170,3,7
171,-16,16
172,-112,62
173,1,9
174,-354,164
175,-101,61
176,-86,46
177,-33,23
178,-339,139
179,3,7
180,-9,9
181,-224,104
182,-11,11
183,-52,32
184,-98,48
185,-26,16
186,-89,39
187,1,9
188,-66,36
189,-77,37
190,5,5
191,2,8
192,-64,34
193,5,5
194,-10,10
195,-79,39
196,3,7
197,3,7
198,0,10
199,-33,23
200,2,8
201,5,5
202,-110,50
203,-43,23
204,3,7
205,-13,13
206,1,9
207,-32,22
208,-77,37
209,5,5
210,-23,23
211,-15,15
212,4,6
213,1,9
214,-42,22
215,-13,13
216,-64,34
217,-13,13
218,-2,12
219,5,5
220,-129,69
221,-133,63
222,-47,37
223,-11,11
224,-25,25
225,-1,11
226,5,5
227,-103,53
228,3,7
229,2,8
230,-67,37
231,-65,35
232,-15,15
233,-30,20
234,3,7
235,4,6
236,3,7
237,-13,13
238,1,9
239,-16,16
240,3,7
241,-39,29
242,3,7
243,3,7
244,3,7
245,-13,13
246,5,5
247,3,7
248,2,8
249,-12,12
250,-14,14
251,2,8
252,-57,37
253,-29,19
254,4,6
255,2,8
256,-13,13
257,-40,30
258,3,7
259,3,7
260,-30,20
261,-34,24
262,-1,11
263,-13,13
264,2,8
265,5,5
266,3,7
267,-42,32
268,-17,17
269,-12,12
270,-28,18
271,-13,13
272,-2,12
273,3,7
274,3,7
275,3,7
276,-14,14
277,-14,14
278,3,7
279,4,6
280,3,7
281,5,5
282,-13,13
283,3,7
284,2,8
285,5,5
286,-1,11
287,-39,29
288,5,5
289,3,7
290,3,7
291,3,7
292,-11,11
293,-30,20
294,-18,18
295,-13,13
296,2,8
297,5,5
298,3,7
299,4,6
300,2,8
301,-15,15
302,-14,14
303,-13,13
304,-55,35
305,-19,19
306,3,7
307,-12,12
308,3,7
309,-67,37
310,3,7
311,-20,20
312,4,6
313,5,5
314,-20,20
315,-36,26
316,3,7
317,4,6
318,2,8
319,-12,12
320,5,5
321,4,6
322,-16,16
323,4,6
324,-18,18
325,-36,26
326,3,7
327,3,7
328,-28,18
329,-31,21
330,-1,11
331,-109,59
332,-29,19
333,3,7
334,3,7
335,0,10
336,-15,15
337,-12,12
338,3,7
339,3,7
340,-14,14
341,-35,25
342,-16,16
343,-21,21
344,-28,18
345,2,8
346,-12,12
347,-28,18
348,3,7
349,3,7
350,3,7
351,-10,10
352,3,7
353,3,7
354,-62,32
355,5,5
356,4,6
357,-28,18
358,3,7
359,3,7
360,2,8
361,2,8
362,-16,16
363,2,8
364,-15,15
365,-18,18
366,3,7
367,-18,18
368,-15,15
369,5,5
370,-29,19
371,3,7
372,-14,14
373,1,9
374,-19,19
375,3,7
376,3,7
377,3,7
378,-31,21
379,2,8
380,3,7
381,3,7
382,-14,14
383,3,7
384,2,8
385,3,7
386,4,6
387,-8,8
388,3,7
389,4,6
390,-13,13
391,3,7
392,-12,12
393,-32,22
394,3,7
395,-27,17
396,3,7
397,3,7
398,-37,27
399,-57,37
1 episodes rewards steps
2 0 -870 200
3 1 -740 200
4 2 -710 200
5 3 -600 200
6 4 -580 200
7 5 -620 200
8 6 -590 200
9 7 -590 200
10 8 -520 200
11 9 -570 200
12 10 -580 200
13 11 -580 200
14 12 -500 200
15 13 -540 200
16 14 -510 200
17 15 -570 200
18 16 -560 200
19 17 -540 200
20 18 -490 200
21 19 -490 200
22 20 -530 200
23 21 -520 200
24 22 -530 200
25 23 -520 200
26 24 -500 200
27 25 -510 200
28 26 -520 200
29 27 -530 200
30 28 -560 200
31 29 -490 200
32 30 -530 200
33 31 -359 149
34 32 -470 200
35 33 -510 200
36 34 -520 200
37 35 -500 200
38 36 -540 200
39 37 -560 200
40 38 -500 200
41 39 -480 200
42 40 -490 200
43 41 -480 200
44 42 -540 200
45 43 -500 200
46 44 -500 200
47 45 -480 200
48 46 -550 200
49 47 -490 200
50 48 -540 200
51 49 -420 200
52 50 -530 200
53 51 -510 200
54 52 -530 200
55 53 -460 200
56 54 -480 200
57 55 -480 200
58 56 -470 200
59 57 -490 200
60 58 -470 200
61 59 -500 200
62 60 -500 200
63 61 -480 200
64 62 -450 200
65 63 -490 200
66 64 -420 200
67 65 -480 200
68 66 -440 200
69 67 -490 200
70 68 -188 88
71 69 -327 167
72 70 -530 200
73 71 -48 28
74 72 -460 200
75 73 -460 200
76 74 -25 25
77 75 -428 178
78 76 -460 200
79 77 -341 151
80 78 -480 200
81 79 -346 156
82 80 -34 24
83 81 -480 200
84 82 -480 200
85 83 -222 112
86 84 -470 200
87 85 -409 169
88 86 -139 59
89 87 -520 200
90 88 -108 58
91 89 -3 13
92 90 -131 71
93 91 -355 145
94 92 -470 200
95 93 -450 200
96 94 -490 200
97 95 -425 185
98 96 -130 70
99 97 -246 116
100 98 -480 200
101 99 -500 200
102 100 -13 13
103 101 -63 33
104 102 -311 131
105 103 -450 200
106 104 -520 200
107 105 -430 200
108 106 -79 39
109 107 -94 44
110 108 -37 27
111 109 -235 115
112 110 -440 200
113 111 -19 19
114 112 -424 194
115 113 -470 200
116 114 -344 164
117 115 -307 147
118 116 -82 52
119 117 -387 177
120 118 -500 200
121 119 -315 145
122 120 -289 119
123 121 -139 79
124 122 -392 192
125 123 -13 13
126 124 -35 25
127 125 -82 42
128 126 -134 64
129 127 -93 53
130 128 2 8
131 129 -212 102
132 130 -87 47
133 131 -70 40
134 132 -109 49
135 133 -77 47
136 134 -17 17
137 135 -118 58
138 136 -132 62
139 137 -76 36
140 138 -93 63
141 139 -357 157
142 140 -129 69
143 141 -46 26
144 142 -60 30
145 143 -339 159
146 144 -10 10
147 145 -164 84
148 146 -145 75
149 147 -53 33
150 148 -3 13
151 149 -55 35
152 150 -398 178
153 151 3 7
154 152 -20 20
155 153 -354 154
156 154 -439 189
157 155 -122 62
158 156 -80 40
159 157 -29 19
160 158 -185 85
161 159 -354 154
162 160 -35 25
163 161 -132 62
164 162 -155 75
165 163 -261 111
166 164 3 7
167 165 -135 65
168 166 -57 37
169 167 -432 182
170 168 -63 33
171 169 -119 59
172 170 3 7
173 171 -16 16
174 172 -112 62
175 173 1 9
176 174 -354 164
177 175 -101 61
178 176 -86 46
179 177 -33 23
180 178 -339 139
181 179 3 7
182 180 -9 9
183 181 -224 104
184 182 -11 11
185 183 -52 32
186 184 -98 48
187 185 -26 16
188 186 -89 39
189 187 1 9
190 188 -66 36
191 189 -77 37
192 190 5 5
193 191 2 8
194 192 -64 34
195 193 5 5
196 194 -10 10
197 195 -79 39
198 196 3 7
199 197 3 7
200 198 0 10
201 199 -33 23
202 200 2 8
203 201 5 5
204 202 -110 50
205 203 -43 23
206 204 3 7
207 205 -13 13
208 206 1 9
209 207 -32 22
210 208 -77 37
211 209 5 5
212 210 -23 23
213 211 -15 15
214 212 4 6
215 213 1 9
216 214 -42 22
217 215 -13 13
218 216 -64 34
219 217 -13 13
220 218 -2 12
221 219 5 5
222 220 -129 69
223 221 -133 63
224 222 -47 37
225 223 -11 11
226 224 -25 25
227 225 -1 11
228 226 5 5
229 227 -103 53
230 228 3 7
231 229 2 8
232 230 -67 37
233 231 -65 35
234 232 -15 15
235 233 -30 20
236 234 3 7
237 235 4 6
238 236 3 7
239 237 -13 13
240 238 1 9
241 239 -16 16
242 240 3 7
243 241 -39 29
244 242 3 7
245 243 3 7
246 244 3 7
247 245 -13 13
248 246 5 5
249 247 3 7
250 248 2 8
251 249 -12 12
252 250 -14 14
253 251 2 8
254 252 -57 37
255 253 -29 19
256 254 4 6
257 255 2 8
258 256 -13 13
259 257 -40 30
260 258 3 7
261 259 3 7
262 260 -30 20
263 261 -34 24
264 262 -1 11
265 263 -13 13
266 264 2 8
267 265 5 5
268 266 3 7
269 267 -42 32
270 268 -17 17
271 269 -12 12
272 270 -28 18
273 271 -13 13
274 272 -2 12
275 273 3 7
276 274 3 7
277 275 3 7
278 276 -14 14
279 277 -14 14
280 278 3 7
281 279 4 6
282 280 3 7
283 281 5 5
284 282 -13 13
285 283 3 7
286 284 2 8
287 285 5 5
288 286 -1 11
289 287 -39 29
290 288 5 5
291 289 3 7
292 290 3 7
293 291 3 7
294 292 -11 11
295 293 -30 20
296 294 -18 18
297 295 -13 13
298 296 2 8
299 297 5 5
300 298 3 7
301 299 4 6
302 300 2 8
303 301 -15 15
304 302 -14 14
305 303 -13 13
306 304 -55 35
307 305 -19 19
308 306 3 7
309 307 -12 12
310 308 3 7
311 309 -67 37
312 310 3 7
313 311 -20 20
314 312 4 6
315 313 5 5
316 314 -20 20
317 315 -36 26
318 316 3 7
319 317 4 6
320 318 2 8
321 319 -12 12
322 320 5 5
323 321 4 6
324 322 -16 16
325 323 4 6
326 324 -18 18
327 325 -36 26
328 326 3 7
329 327 3 7
330 328 -28 18
331 329 -31 21
332 330 -1 11
333 331 -109 59
334 332 -29 19
335 333 3 7
336 334 3 7
337 335 0 10
338 336 -15 15
339 337 -12 12
340 338 3 7
341 339 3 7
342 340 -14 14
343 341 -35 25
344 342 -16 16
345 343 -21 21
346 344 -28 18
347 345 2 8
348 346 -12 12
349 347 -28 18
350 348 3 7
351 349 3 7
352 350 3 7
353 351 -10 10
354 352 3 7
355 353 3 7
356 354 -62 32
357 355 5 5
358 356 4 6
359 357 -28 18
360 358 3 7
361 359 3 7
362 360 2 8
363 361 2 8
364 362 -16 16
365 363 2 8
366 364 -15 15
367 365 -18 18
368 366 3 7
369 367 -18 18
370 368 -15 15
371 369 5 5
372 370 -29 19
373 371 3 7
374 372 -14 14
375 373 1 9
376 374 -19 19
377 375 3 7
378 376 3 7
379 377 3 7
380 378 -31 21
381 379 2 8
382 380 3 7
383 381 3 7
384 382 -14 14
385 383 3 7
386 384 2 8
387 385 3 7
388 386 4 6
389 387 -8 8
390 388 3 7
391 389 4 6
392 390 -13 13
393 391 3 7
394 392 -12 12
395 393 -32 22
396 394 3 7
397 395 -27 17
398 396 3 7
399 397 3 7
400 398 -37 27
401 399 -57 37