← 강화학습 AI · 3강CONNECT AI LAB / RL CUP #2
강화학습 AI · 3강 대회 · RL CUP #2

RL CUP #2기억하기.

얼음 호수 64칸, 보상은 ⭐ G 한 곳. 어렵게 한 번 닿은 기억을 어떻게 쌓고, 어떻게 꺼내야 가장 빨리 배울까? 3강의 기억 상자 숫자 네 개로 얼음 호수 5개를 정복하세요.

기억 상자로 학습 중 · 실시간—

LEADERBOARD

0명 참가최고 —평균 —도전 0번
첫 도전을 기다리는 중…첫 도전을 기다리는 중…
#탐험가칭호점수
불러오는 중…
MY POSITION
—
로그인하고 제출하면 내 순위가 여기에 떠요
⚡ 도전하기
01 · RULES

규칙

얼음 호수 5개Gymnasium FrozenLake 8×8 공식 지도 + 같은 방식으로 만든 지도 4개 · 미끄럽지 않음 · 한 판 최대 100걸음
⭐ G +1 · H 0G 에 닿아야 1점. 구멍 H 에 빠지면 그 판은 0점으로 끝. 무작위로 걸으면 G 도착 0.2~0.3%
탐험은 고정엡실론 100% → 1% (판수의 60% 지점에서 1%) · 학습률 0.5 · 할인율 0.95 — 3강 코랩과 똑같습니다
🧱 브릭으로 참가처음 들어오면 1,000 브릭(수강생). 제출할 때 전략 비용만큼 실제 브릭이 빠져요. 한 전략 최대 1,000 브릭
호수마다 200점, 학습 씨앗 3개 평균. 비용은 점수가 아니라 브릭으로 냅니다: 판수 × 0.3 + 다시 배운 횟수 ÷ 2,500. 1브릭 = 1원 — 아낀 브릭은 강의 결제 때 그대로 쓸 수 있어요.
02 · THE MEMORY PLAN

기억 계획표 — 상자는 언제 차고, 몇 번 다시 배울까

공식 지도에서 지금 숫자로 한 번 학습시킨 실제 기록입니다. 하늘색 = 상자에 쌓인 SARS 수(상자 크기에서 멈춤), 연두 = 누적으로 다시 배운 횟수, 흰 선 = 엡실론. 손잡이를 움직이면 바로 바뀝니다.

—상자가 꽉 차는 판
—쌓인 SARS 총수 (이 지도, 씨앗 1)
—기억에서 다시 배운 횟수
—이 전략의 브릭 비용 (호수 5개)
03 · THE DILEMMA

무작위로 꺼낼까, 최근 것을 꺼낼까

3강 코랩의 5가지 대결(씨앗 5개 평균): 쌓지 않음 2.3% · 무작위 23.9% · 최근 것만 44.3% · 처음 것만 0.2% · 보상 우선 24.0%. 그럼 섞으면? 그건 여러분이 찾을 몫입니다.

RANDOM · 무작위

🎲 상자 전체에서 골고루

23.9%

오래전 귀한 기억(⭐)까지 다시 꺼냅니다. 대신 방금 찾은 길이 퍼지는 속도는 느려요.

RECENT · 최근

⏪ 방금 걸은 길을 거꾸로

44.3%

G 의 가치가 방금 길을 따라 빠르게 번집니다. 대신 오래된 기억은 다시 보지 않아요.

04 · ARENA

실험실 — 내 기억 상자로 호수 학습시키기

필수는 🎛️ 와 🏁 두 개뿐. 학습 시작 · 점수 계산은 무료, 제출할 때만 브릭이 쓰여요.

🎛️
전략
👀
구경 선택
🧮
계산 선택
🏁
제출
SARS 를 몇 개까지 쌓아 둘까. 가득 차면 가장 오래된 것부터 지워요
한 걸음마다 상자에서 몇 개를 꺼내 Q 를 다시 고칠까
꺼낼 것 중 「가장 최근 기억」의 비율. 나머지는 무작위
🧱 계산 중…
호수마다 몇 판 학습시킬지. 판수 × 0.3 브릭이 들어요
👀 구경용 · 안 봐도 OK
0판
—지금 ε
0⭐ G 도착 판
0🕳 구멍 판
—처음 도착한 판
0다시 배운 횟수
기억 상자 — 왼쪽이 오래된 기억, 오른쪽 끝이 방금 쌓인 기억 · ⭐ 금색 = G 도착 기억 · 하늘 막대 = 이번 판에 꺼낸 기억
밝을수록 큰 Q (G 까지 갈 수 있다고 믿는 칸)이번 판 발자국다 배운 길
05 · SCORE

점수 계산 — 호수 5개 전부

서버도 똑같은 계산을 다시 해서 순위를 매깁니다 (같은 숫자 → 같은 점수)
내 점수 / 1000
—
—

호수별 점수 (200점 만점 · ⭐ G 도착한 판)
기준선과 비교

🏁 내 전략 제출하기

숫자 4개 → 서버가 호수 5개 자동 채점 → 순위표. 제출할 때마다 전략 비용만큼 🧱 브릭이 빠져요.

🧱 처음 들어오면 1,000 브릭 (강화학습 AI 수강생) · 제출할 때 전략 비용만큼 쓰여요
→ 서버
?
06 · HINTS

힌트

HINT 1

상자 크기

너무 작으면 어렵게 얻은 ⭐ 기억이 금방 밀려나 지워집니다. 너무 크면 탐험 초기의 엉뚱한 걸음들이 오래 남아요.

HINT 2

꺼낼 수

많이 꺼낼수록 가치가 빨리 번지지만, 다시 배운 횟수만큼 계산 비용이 붙습니다. 계획표의 연두 선을 보세요.

HINT 3

섞기

최근 것은 빠르고, 무작위는 골고루. 둘 중 하나만 골라야 할까요? 최근 비율 손잡이는 0 과 100 사이에도 있습니다.

정답은 알려 드리지 않습니다. 3강 코랩 11번 셀(5가지 대결)을 직접 바꿔 돌려 보고, 여기서 겨뤄 보세요.

내 전략
👀 0/5🧮 —🏁 미제출
🏁 제출하러 가기