LeRobot, VLA와 전신 컨트롤러로 휴머노이드 Unitree G1 구동 지원
- 출처: Hugging Face LeRobot team
- 저자: Open Source Robotics
- 게시일: 2026-09-25
- 카테고리: business
LeRobot 팀이 Unitree G1을 위한 완전한 휴머노이드 워크플로를 공개했다. π0.5 정책이 모션 토큰을 예측하면 NVIDIA의 SONIC 컨트롤러가 이를 균형 잡힌 전신 동작으로 바꾸며, 원격 조작 장비, 출력용 하드웨어, 데이터셋, 가중치가 모두 공개됐다. SONIC 경로는 LeRobot의 메인 브랜치에 있으며 아직 정식 릴리스에는 포함되지 않았다.
LeRobot이 이제 학습된 정책을 실물 크기 휴머노이드에서 실행할 수 있다. 9월 25일 게시물에서 Hugging Face의 LeRobot 팀은 Unitree G1에서 전체 과정을 보여 준다. 전신 원격 조작, 데이터셋, 파인튜닝된 비전-언어-행동 모델, 그리고 모델이 무엇을 할지 결정하는 동안 29개 관절의 이족 로봇을 서 있게 하는 컨트롤러다.
이 설계는 로봇 팔에는 없던 문제에 대한 답이다. VLA는 걷는 로봇의 균형을 혼자 잡기에는 너무 느리기 때문에, LeRobot은 둘 사이에 빠른 컨트롤러를 둔다. 정책은 OpenPI의 π0.5이며, 관절 각도 대신 64차원의 압축된 모션 토큰을 예측한다. GR00T-WholeBodyControl의 일부인 NVIDIA SONIC의 디코더가 각 토큰과 최근 신체 상태를 받아 로봇에서 50Hz로 관절 목표값을 만든다. 방법은 OpenHLM 논문을 따르되 한 가지가 다르다. LeRobot은 잠재 토큰 자체로 VLA를 학습시킨다. SONIC 디코더는 8월 17일 순수 Python ONNX 재구현으로 LeRobot에 병합됐다.
시연 과제는 캔을 테이블까지 옮기는 것이다. 데이터셋은 약 100개 에피소드, 카메라 3대로 기록한 약 71분 분량의 VR 원격 조작으로 이루어져 있다. π0.5를 H100 4장에서 12,000스텝 동안 파인튜닝했고, 결과 정책은 공개돼 있다. 로봇 자체도 개조됐다. 출력한 손목 어댑터에 단 OpenArm 그리퍼, 머리 카메라, 그리고 CAN-FD 어댑터와 배선을 담는 출력한 백팩이다. 출력용 부품도 공개됐다.
게시물은 두 번째 실험과 더 넓은 스택도 다룬다. 팀은 mjlab에서 PPO로 SONIC 위에 LoRA 어댑터를 학습시켜, G1이 머리 카메라의 깊이 정보로 날아오는 공을 피하게 했다. 이는 ViBE를 따른 것이다. 시뮬레이션에서 투구의 79.1%를 피했고, 깊이 입력을 비웠을 때는 0%였다. 팀은 이것이 시뮬레이션 수치이며 실제 하드웨어 영상은 평가가 아니라 시연이라고 분명히 밝힌다. G1은 GR00T 전신 제어나 Amazon FAR의 Holosoma로도 구동할 수 있다. MuJoCo 시뮬레이션과 팔 IK가 있으며, 팀의 Homunculus 장갑과 외골격은 관절 움직임에서 직접 원격 조작을 기록한다. 이 장치들은 원래 HOPEJr을 위해 만들어졌다.
분명히 해 둘 점이 하나 있다. G1 지원은 몇 달 전부터 LeRobot 릴리스에 포함돼 있지만, SONIC 디코더는 최신 태그 릴리스인 v0.6.1 이후에 병합됐다. 여기 소개된 워크플로를 쓰려면 소스에서 LeRobot을 설치해야 하며, G1 문서도 메인 브랜치를 기준으로 작성돼 있다. 팀은 다음으로 지원할 휴머노이드가 Menlo Research의 오픈소스 로봇 Asimov라고 밝혔다.
중요한 이유
휴머노이드는 로봇 학습 분야가 힘을 쏟고 있는 곳이지만, 지금까지 오픈 도구는 대부분 로봇 팔에서 멈춰 있었다. 이족 로봇에서 어려운 부분은 모델이 아니라 모델이 생각하는 동안 로봇을 세워 두는 일이다. 느린 정책과 빠른 전신 컨트롤러로 일을 나누고 그 과정의 모든 조각을 공개함으로써, G1을 가진 누구나 재현 가능한 출발점을 갖게 된다. 또한 균형을 처음부터 다시 배우지 않고도 약 100번의 시연으로 과제 수준의 정책을 학습할 수 있다.
핵심 요점
- LeRobot은 π0.5 정책이 SONIC의 64차원 모션 토큰을 예측하게 해 Unitree G1에서 실행하며, 로봇의 빠른 디코더가 이를 50Hz로 29자유도 관절 목표값으로 바꾼다
- SONIC 디코더는 8월 17일 LeRobot에 병합된 순수 Python ONNX 포트로, 메인 브랜치에는 있지만 최신 릴리스인 v0.6.1에는 없다
- 예시 캔 운반 정책은 약 100개의 전신 VR 원격 조작 에피소드(약 71분)로 학습됐으며, 데이터셋과 가중치가 공개돼 있다
- 출력 가능한 G1 개조 부품이 공개됐다. OpenArm 그리퍼용 손목 어댑터, 머리 카메라 홀더, CAN-FD 어댑터용 백팩 케이스다
- mjlab에서 학습한 깊이 기반 공 회피 어댑터는 시뮬레이션에서 투구의 79.1%를 피했으며, 저자들은 하드웨어에서 측정한 성공률은 없다고 밝혔다
- G1은 GR00T 전신 제어나 Holosoma로도 구동할 수 있으며, MuJoCo 시뮬레이션, 팔 IK, 완전한 고유수용 상태를 제공한다
- Menlo Research의 오픈소스 휴머노이드 Asimov가 다음 지원 로봇으로 꼽혔다
오픈소스 관점
게시물이 설명하는 모든 것이 공개됐다. Apache-2.0 라이선스의 LeRobot에 포함된 SONIC 디코더와 G1 통합, 원격 조작 데이터셋, 파인튜닝된 정책 가중치, 출력 가능한 하드웨어 개조, 그리고 Homunculus 장갑과 외골격 설계다. 공개되지 않은 것은 로봇 자체다. Unitree G1은 상용 휴머노이드이므로 이 워크플로는 닫힌 하드웨어 위의 오픈 소프트웨어이며, 게시물은 다음으로 지원할 오픈 휴머노이드로 Asimov를 꼽는다.
관련 기술
- LeRobot
- Unitree G1
- OpenPI
- SONIC
- GR00T-WholeBodyControl
- OpenHLM
- Holosoma
- mjlab
- OpenArm
- MuJoCo
관련 프로젝트
링크
- 출처: https://huggingface.co/blog/nepyope/bringing-humanoids-to-lerobot