Skip to content

Learn World Models에 오신 것을 환영합니다

Learn World Models는 프로젝트 기반의 월드모델 강좌로, VAE 인코더와 잠재 동역학(Latent Dynamics)에서 시작해 Dreamer, TD-MPC, STORM을 거쳐, 언어와 물리 세계에 관한 최전선 논쟁까지 다룹니다.

권장 학습 순서: 먼저 L01과 L02를 P01, P02와 번갈아 학습하고, 이어서 L03을 P03, P04와 함께 익힙니다. 그다음 P05와 P06을 진행하며 L04를 활용하고, 마지막으로 L05로 마무리합니다.

강의

강의주제
제1강월드모델의 정의와 기원
제2강상태 추정, 관측 인코딩과 잠재 동역학
제3강아키텍처 패턴, 학습 패러다임과 계획
제4강월드모델 진단하기
제5강최전선 논쟁

프로젝트

VAE 인코더, 잠재 동역학 모델, 완전한 Dreamer 파이프라인, TD-MPC 플래너, STORM 평가 대시보드, 반사실 월드모델을 직접 구축합니다.

무엇을 배우게 될까요

  • 왜 월드모델이 필요한가: Craik(1943)에서 JEPA까지의 역사적 맥락.
  • 상태 추정과 관측 인코딩: 부분 관측성, 믿음 상태, VAE, ELBO, 표현이 보존해야 할 정보.
  • 잠재 동역학: GRU, MDN-RNN, RSSM, 그리고 학습 분포와 자유 롤아웃의 간극.
  • 아키텍처 계열: 9대 아키텍처 계열, RNN/RSSM, Transformer, 확산 모델, JEPA, RWM, 공간 3D/4D 모델, Genie, LoopWM, WAM.
  • 계획 메커니즘: CEM-MPC, 잠재 Actor-Critic과 TD-MPC.
  • 평가 지표: FID, 보상 상관성, 일관성 손실, PSNR과 호라이즌 드리프트.
  • 최전선 논쟁: 언어 vs 물리 세계, Bitter Lesson, 연구 목표로서의 AGI.