๊ฐ•ํ™”ํ•™์Šต

    Hello RL : Frozen Lake ์†Œ๊ฐœ ๋ฐ ๊ธฐ๋ณธ ์ฝ”๋“œ

    Hello RL : Frozen Lake ์†Œ๊ฐœ ๋ฐ ๊ธฐ๋ณธ ์ฝ”๋“œ

    Frozen Lake? Frozen Lake๋Š” RL์˜ hello world์™€ ๊ฐ™์€ ํ™˜๊ฒฝ์ž…๋‹ˆ๋‹ค. ๊ฒŒ์ž„์€ ๊ต‰์žฅํžˆ ๊ฐ„๋‹จํ•ฉ๋‹ˆ๋‹ค. 4x4์˜ ํ™˜๊ฒฝ์ด ์„ค์น˜๋ฉ๋‹ˆ๋‹ค. (0,0) ์‹œ์ž‘์ง€์ ์—์„œ (3,3)๊นŒ์ง€ agent๊ฐ€ ์ด๋™์„ ํ•˜๋ฉด ๊ฒŒ์ž„์ด ์ข…๋ฃŒ๋ฉ๋‹ˆ๋‹ค. ์ด ๋•Œ ํ™˜๊ฒฝ์—๋Š” ๊ตฌ๋ฉ์ด(H)๊ฐ€ ์žˆ์„ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ๊ทธ ๊ตฌ๋ฉ์ด๋ฅผ ํ”ผํ•ด์„œ ๋ชฉํ‘œ์ง€์ (3,3)๊นŒ์ง€ ์ด๋™ํ•ด์•ผํ•ฉ๋‹ˆ๋‹ค. ๊ตฌ๋ฉ์ด(H)์— ๋น ์งˆ๊ฒฝ์šฐ ์บ๋ฆญํ„ฐ๋Š” ์ฃฝ๊ฒŒ๋ฉ๋‹ˆ๋‹ค. (์ด ๊ฐ๊ฐ์˜ ์นธ์„ ์šฐ๋ฆฌ๋Š” state๋ผ๊ณ  ๋ถ€๋ฅด์ฃ .) agent๋Š” ์ƒํ•˜์ขŒ์šฐ 4๊ฐœ์˜ action์„ ํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ๊ทธ๋Ÿฐ๋ฐ ์ด action์— ๋”ฐ๋ผ ์›ํ•˜๋Š” ๋ฐฉํ–ฅ์œผ๋กœ ์ด๋™ํ•˜์ง€๋Š” ์•Š์Šต๋‹ˆ๋‹ค. ์™œ๋ƒํ•˜๋ฉด ์–ผ์Œ์ด๊ธฐ ๋•Œ๋ฌธ์— ๋ฏธ๋„๋Ÿฌ์ ธ ๋‹ค๋ฅธ state๋กœ ์ด๋™ํ•  ์ˆ˜ ์žˆ๊ธฐ ๋•Œ๋ฌธ์ด์ฃ . ์œ„ ์˜ˆ์—์„œ ์ถœ๋ฐœ์„ ํ•  ๋•Œ ์•„๋ž˜๋กœ ๊ฐ€๊ณ  ์‹ถ์–ด ์•„๋ž˜๋กœ ์ด๋™์„ ๋ช…๋ นํ•˜์˜€๋Š”๋ฐ ..