2.2 模型架构

本组把单个算子组装成完整模型，重点是 block、router 和结构技巧。

导航： 上一组 2.1 基础算子 | Chapter 2 导学 | 下一组 2.3 训练技术

包含内容

• 05 LLaMA3 Block Tutorial
• 06 MoE Router
• 07 MoE Load Balancing Loss
• 08 Architecture Tricks

学习顺序

建议按 05 -> 06 -> 07 -> 08 顺序学习。