第二讲:观测编码与潜在动力学
Dreamer 的核心问题可以拆成两个:如何压缩感知,以及如何预测未来。本讲分两个部分,各解决一个问题。
- 观测编码:为什么要压缩?VAE 的编码-解码结构,ELBO 损失的直觉,CNN 编码器的结构
- 潜在动力学:从最简单的 GRU 出发,经由 MDN-RNN 的不确定性建模,到达 RSSM 的确定性/随机性双路径设计
先读“观测编码”并完成 P01,再回来读“潜在动力学”并完成 P02。这样,动力学模型处理的是你已经训练和检查过的表示。
Dreamer 的核心问题可以拆成两个:如何压缩感知,以及如何预测未来。本讲分两个部分,各解决一个问题。
先读“观测编码”并完成 P01,再回来读“潜在动力学”并完成 P02。这样,动力学模型处理的是你已经训练和检查过的表示。