Open Source Robotics

精选高质量开源机器人项目、工具和软件,推动机器人社区发展。

LeRobot 现可通过 VLA 与全身控制器驱动 Unitree G1 人形机器人

  • 来源: Hugging Face LeRobot team
  • 作者: Open Source Robotics
  • 发布日期: 2026-09-25
  • 类别: business

LeRobot 团队发布了面向 Unitree G1 的完整人形机器人工作流。π0.5 策略预测运动令牌,NVIDIA 的 SONIC 控制器将其转化为保持平衡的全身运动;遥操作装置、可打印硬件、数据集和权重均已开放。SONIC 路径目前在 LeRobot 主分支上,尚未进入正式版本。

LeRobot 现在可以在全尺寸人形机器人上运行学习得到的策略。在 9 月 25 日的文章中,Hugging Face 的 LeRobot 团队在 Unitree G1 上展示了完整链路:全身遥操作、数据集、经过微调的视觉-语言-动作模型,以及一个在模型决定做什么时让 29 关节双足机器人保持直立的控制器。

这一设计解决的是机械臂从未遇到过的问题。VLA 太慢,无法单独让行走中的机器人保持平衡,因此 LeRobot 在两者之间加入了一个快速控制器。策略是 OpenPI 的 π0.5,它预测的是一个紧凑的 64 维运动令牌,而不是关节角度。NVIDIA SONIC 的解码器(属于 GR00T-WholeBodyControl)在机器人上将每个令牌与近期身体状态结合,以 50 Hz 输出关节目标。该方案沿用 OpenHLM 论文的做法,只有一处改动:LeRobot 直接在潜在令牌上训练 VLA。SONIC 解码器已于 8 月 17 日合并进 LeRobot,是一个纯 Python 的 ONNX 重新实现。

演示任务是把一个罐子拿到桌子上。其数据集包含约 100 个回合,约 71 分钟的 VR 遥操作,带三路摄像头。π0.5 在其上用四块 H100 微调了 12,000 步,得到的策略已公开。机器人本身经过改装:OpenArm 夹爪装在打印的手腕适配件上,头部加装摄像头,背部有一个打印的背包,用于容纳 CAN-FD 适配器和线缆。可打印零件也已开放。

文章还介绍了第二个实验和更完整的技术栈。团队在 mjlab 中用 PPO 在 SONIC 上训练了一个 LoRA 适配器,让 G1 利用头部摄像头的深度信息躲避扔来的球。这一工作参照了 ViBE。在仿真中它躲开了 79.1% 的投掷,而屏蔽深度输入时为 0%。团队明确表示这是仿真数据,而硬件视频只是演示,不是评估。G1 也可以通过 GR00T 全身控制或 Amazon FAR 的 Holosoma 驱动。它还有 MuJoCo 仿真和手臂逆运动学,团队的 Homunculus 手套和外骨骼则直接从关节运动记录遥操作数据。这些设备最初是为 HOPEJr 打造的。

有一点需要说明。G1 支持已经在 LeRobot 的正式版本中存在数月,但 SONIC 解码器是在最新标记版本 v0.6.1 之后才合并的。要使用这里描述的工作流,需要从源码安装 LeRobot,而 G1 文档也是针对主分支编写的。团队表示,下一个将支持的人形机器人是 Menlo Research 的开源机器人 Asimov。

为何重要

人形机器人是机器人学习领域正在投入精力的方向,而此前开源工具大多止步于机械臂。双足机器人的难点不在模型,而在于模型思考时让它保持站立。把工作分给一个慢速策略和一个快速全身控制器,并公开链路中的每一个环节,让任何拥有 G1 的人都有了可复现的起点。这也意味着任务级策略只需约一百次演示即可训练,无需从头重新学习平衡。

要点

  • LeRobot 让 π0.5 策略预测 SONIC 的 64 维运动令牌,从而在 Unitree G1 上运行;机载快速解码器以 50 Hz 将其转化为 29 自由度的关节目标
  • SONIC 解码器是一个纯 Python 的 ONNX 移植版,于 8 月 17 日合并进 LeRobot;它在主分支上,但不在最新版本 v0.6.1 中
  • 示例的搬罐策略基于约 100 个全身 VR 遥操作回合(约 71 分钟)训练,数据集和权重均已公开
  • 可打印的 G1 改装件已开放:OpenArm 夹爪的手腕适配件、头部摄像头支架,以及容纳 CAN-FD 适配器的背包外壳
  • 在 mjlab 中训练的基于深度的躲球适配器在仿真中躲开了 79.1% 的投掷;作者表示尚无在硬件上测得的成功率
  • G1 也可通过 GR00T 全身控制或 Holosoma 驱动,并提供 MuJoCo 仿真、手臂逆运动学和完整的本体感知状态
  • Menlo Research 的开源人形机器人 Asimov 被列为下一个支持的机器人

开源视角

文章描述的所有内容都已开放:LeRobot 中基于 Apache-2.0 的 SONIC 解码器与 G1 集成、遥操作数据集、微调后的策略权重、可打印的硬件改装件,以及 Homunculus 手套和外骨骼的设计。不开放的是机器人本身。Unitree G1 是商业人形机器人,所以这是运行在封闭硬件上的开放软件工作流,文章也点名 Asimov 为下一个将支持的开源人形机器人。

相关技术

  • LeRobot
  • Unitree G1
  • OpenPI
  • SONIC
  • GR00T-WholeBodyControl
  • OpenHLM
  • Holosoma
  • mjlab
  • OpenArm
  • MuJoCo

相关项目

  • LeRobot
  • OpenPI
  • OpenArm
  • mjlab
  • NVIDIA Isaac GR00T
  • Holosoma
  • HOPEJr
  • Asimov v1

链接

  • 来源: https://huggingface.co/blog/nepyope/bringing-humanoids-to-lerobot

本网站需要 JavaScript 才能正常运行。请启用 JavaScript 以浏览我们的开源机器人项目。