Frozen Lake

Hello RL : Frozen Lake ์๊ฐ ๋ฐ ๊ธฐ๋ณธ ์ฝ๋
Frozen Lake? Frozen Lake๋ RL์ hello world์ ๊ฐ์ ํ๊ฒฝ์ ๋๋ค. ๊ฒ์์ ๊ต์ฅํ ๊ฐ๋จํฉ๋๋ค. 4x4์ ํ๊ฒฝ์ด ์ค์น๋ฉ๋๋ค. (0,0) ์์์ง์ ์์ (3,3)๊น์ง agent๊ฐ ์ด๋์ ํ๋ฉด ๊ฒ์์ด ์ข ๋ฃ๋ฉ๋๋ค. ์ด ๋ ํ๊ฒฝ์๋ ๊ตฌ๋ฉ์ด(H)๊ฐ ์์ ์ ์์ต๋๋ค. ๊ทธ ๊ตฌ๋ฉ์ด๋ฅผ ํผํด์ ๋ชฉํ์ง์ (3,3)๊น์ง ์ด๋ํด์ผํฉ๋๋ค. ๊ตฌ๋ฉ์ด(H)์ ๋น ์ง๊ฒฝ์ฐ ์บ๋ฆญํฐ๋ ์ฃฝ๊ฒ๋ฉ๋๋ค. (์ด ๊ฐ๊ฐ์ ์นธ์ ์ฐ๋ฆฌ๋ state๋ผ๊ณ ๋ถ๋ฅด์ฃ .) agent๋ ์ํ์ข์ฐ 4๊ฐ์ action์ ํ ์ ์์ต๋๋ค. ๊ทธ๋ฐ๋ฐ ์ด action์ ๋ฐ๋ผ ์ํ๋ ๋ฐฉํฅ์ผ๋ก ์ด๋ํ์ง๋ ์์ต๋๋ค. ์๋ํ๋ฉด ์ผ์์ด๊ธฐ ๋๋ฌธ์ ๋ฏธ๋๋ฌ์ ธ ๋ค๋ฅธ state๋ก ์ด๋ํ ์ ์๊ธฐ ๋๋ฌธ์ด์ฃ . ์ ์์์ ์ถ๋ฐ์ ํ ๋ ์๋๋ก ๊ฐ๊ณ ์ถ์ด ์๋๋ก ์ด๋์ ๋ช ๋ นํ์๋๋ฐ ..