跳到主要内容

查看 Markdown

页面正文已转为 Markdown。交互图形可通过文末链接在原网页查看。

项目实战:从仿真验证走向真机部署

选择一个具体任务,通过分章项目、Demo 或复现案例跑通环境、训练、控制与评估。既可以沿着章节逐步搭建完整系统,也可以选择一个独立实验验证方法。遇到原理上的疑问,到 理论基础 查找对应模块;查找论文、数据和代码来源,可以进入具身导论的 领域资源。

从哪里开始​

  • 想从零搭建一个系统:从 四足机器人项目 开始,按 8 章顺序学习执行器、运动学、建模、步态与策略训练。需要 Python 基础,控制和线性代数可以结合实验补齐。
  • 想学习机械臂数据与真机操作:先读 LeRobot 中文课程讲义,再进入 SO-101 真机教程。讲义已整理 Unit 0–2,需要 Python 基础;后续操作需要对应硬件。
  • 想先体验一个仿真效果:选择 MicroDuck RL 或 ACT 双臂操作,按项目要求准备环境。
  • 想系统掌握轮足平衡与跨仿真部署:进入 两轮足 Flamingo · Isaac Lab,按 6 章主线打通并行 PPO、约束式强化学习(CaT)、ONNX 导出与 MuJoCo 抗扰动压测。

动手前先确认环境和目标,按步骤保留代码、参数与运行结果,再用评测和失败案例检查自己的理解。

方向一览​

方向项目数适合
机械臂系列9 个已上线,2 个规划中连续控制 / VLA / 数据采集 / 模仿学习 / 真机入门
四足系列3 个已上线,2 个规划中强化学习 / 运动学与步态控制 / VLA 导航 / sim2real
双足系列5 个已上线,3 个规划中两轮足 Isaac Lab + CaT / GPU 并行 PPO / 长链课程学习
移动操作3 个规划中导航 + 操作综合

已上线项目​

  • 两轮足 Flamingo · Isaac Lab 强化学习实战:围绕 8 自由度双足轮腿机器人,从延迟与齿轮耦合执行器建模出发,完成 4096 环境并行 PPO 与约束式强化学习(CaT)对比、ONNX 归一化融合导出以及 MuJoCo 零样本抗扰动评测(总览与 6 章完整上线)。
  • MicroDuck RL:让小黄鸭学会走路、起身和翻滚:从 MJCF、BAM 执行器和 mjlab 任务注册开始,在 MuJoCo Warp 中训练 18 个动作模式,并用 GIF / MP4 展示离屏评估结果。
  • MicroDuck 跳墙课程:在基础教程之上,用 12 步课程把跑步、跳跃、越墙、前滚翻、起身串成全链,含每步配置、GIF 验收标准与课程心法。

AMD 专区​

  • AUP Learning Cloud 云算力:在浏览器中使用 Ryzen AI APU、JupyterHub、Code Server 与 ROCm 环境,适合课程练习、端侧推理和小规模实验。
  • MicroDuck RL|AMD ROCm:在 Radeon R9700 上编译 ROCm Warp / MuJoCo Warp,修复动态 broadphase 缓存并训练双足 PPO。
  • ACT 双臂操作训练|AMD ROCm:在 Radeon GPU 上完成 ACT BF16 训练、断点续训、20 回合评测与视频导出。
  • 玩转 Pupper 四足机器人:AMD 专区旗舰项目,包含 Pupper Locomotion|强化学习运动策略与 Pupper VLA|视觉-语言-动作智能两个方向。

仿真实战​

项目技术主线状态
从零到一搭建四足机器人MuJoCo、PD 控制、运动学、步态、策略训练与感知总览与 8 章可读
Petoi Quaddle 四舵机步行仿真官方 URDF 适配、周期控制、接触验证与长距离地面显示可用
MicroDuck RL:走路、起身和翻滚mjlab、MuJoCo Warp、CUDA 并行 PPO、18 个动作模式可用
MicroDuck 跳墙课程12 步课程学习、跑跳滚翻全链、奖励防套利、GIF 验收可用
MuJoCo 仿真入门MJCF、物理仿真、Python 控制可用
DDPG InvertedPendulum连续控制基础与 DDPG baseline可用
DDPG Reacher二维机械臂目标追踪可用
DDPG Pusher机械臂接触操作与奖励设计可用
ACT 双臂操作训练ALOHA、模仿学习、ACT、多回合评估可用
π₀.₅ + RECAP:LIBERO 复现价值模型、优势标注、ACP、LIBERO 评估可用
Petoi Quaddle VLA 导航训练SmolVLA 微调、CPG 低层运控、temporal ensembling、任务分解可用
Sim2Sim 验证跨仿真策略验证施工中
两轮足 Flamingo · Isaac Lab8-DoF 轮足欠驱动平衡、PPO vs CaT、ONNX 导出与 MuJoCo Sim2Sim 压测总览与 6 章可读

真机实战​

LeRobot 讲义提供数据与工具链准备,SO-101 项目再将这些知识接到真实机械臂上。

项目技术主线状态
LeRobot 中文课程讲义机器人学习、数据集、工具链与经典机器人学已整理 Unit 0–2
SO-101 + LeRobot 真机教程硬件连通、安全测试、动作回放可用
ROS2 机械臂控制ROS2 控制链路与机械臂执行施工中
Sim2Real 指南仿真策略部署与真机验证施工中