Universal Manipulation Exoskeleton (UME)
可穿戴双臂外骨骼,把机器人的关节力矩实时反馈给操作者
许可证
Apache 2.0
代码和 CAD:Apache-2.0,见仓库中的 LICENSE.md。随附的 OpenArm 模型保留自己的 Apache-2.0 许可证文件,ACT 和 DETR 代码带有原项目中 Facebook 的版权声明。Yahboom 的 IMU 读取程序是厂商代码,未注明许可证。项目网站模板采用 CC BY-SA 4.0;论文和视频归作者所有。已于 2026-11-08 对照 LICENSE.md 和仓库中的文件核实。
概述
Universal Manipulation Exoskeleton(UME)是一款穿戴在双臂上的上肢外骨骼,用于遥操作机械臂,并在实时力矩反馈下录制示范。每条手臂有八个达妙(Damiao)准直驱执行器:其中七个跟随操作者的肩、肘和腕,第八个位于手部,用来驱动夹爪。同一组执行器既测量操作者的动作,又把机器人感受到的关节力矩反推回来,因此操作者能感到接触,录下的数据包含整条手臂的关节位置和力矩。结构用 PLA 打印并装在铝型材上,背部的 IMU 在操作者身体倾斜时驱动移动底盘,论文给出的材料成本为 1900 USD。UME 来自蚂蚁集团和斯坦福大学,论文发布在 arXiv 上。仓库包含 CAD、MuJoCo 模型、遥操作与录制代码,以及论文中使用的 ACT 训练脚本。
UME 是一款用于遥操作的外骨骼,在两个方向上都闭合了回路。它的关节是达妙的低减速比准直驱执行器,既能被穿戴的手臂从输出端反向带动,也能对手臂施加力矩。操作者运动时,UME 控制从动机器人;机器人遇到阻力时,其测得的关节力矩会映射回外骨骼的关节,并叠加重力、科里奥利力和摩擦补偿,使反馈尽可能透明。作者展示了一位操作者蒙着眼睛、只凭力矩反馈把剑从鞘中拔出。
机构遵循人的手臂结构。关节 J1 到 J3 的轴线交于肩部中心,J4 是肘部,J5 到 J7 的轴线交于腕部中心,因此外骨骼保留了腕部的全部活动范围和肩部的大部分活动范围。重定向把外骨骼和机器人都拆成一个虚拟球形肩、一个肘和一个虚拟球形腕:正向运动学给出每个球形关节的姿态,逆运动学求出机器人对应的关节,各子机械臂的雅可比矩阵把速度向前映射、把力矩向后映射。论文用这一方法驱动 7-DoF 的 OpenArm、UFACTORY 的 6-DoF X-ARM 机械臂,以及 MuJoCo 中 7-DoF 的 Franka 机械臂。背部的 Yahboom IMU 为重力补偿提供框架姿态,并把操作者的身体倾斜转换为移动底盘的速度指令。
整套装置使用 8 个 DM-J4340-2EC 和 8 个 DM-J4310-2EC 执行器、4 kg 拓竹(Bambu Lab) PLA Basic、2020 铝型材、一个双通道 CAN-FD 转 USB 适配器、一台 30 V 10 A 可调直流电源、XT30 线缆、M3 和 M5 螺丝以及一条快拆腰带;论文附录 E.2 给出的整套系统价格为 1900 USD。硬件指南介绍如何用达妙的调试工具设置每个执行器的 CAN ID 和总线速率,还包括打印参数、装配要点和关节归零;软件指南涵盖 CAN 配置、重力补偿检查、遥操作、数据录制和训练。可打印的 STL 文件与 MuJoCo 模型放在一起,可编辑的 STEP 文件在 ume_step 文件夹中。装好的外骨骼约重 12 kg,作者称普通成年人可以舒适地穿戴最长 2 小时。
为了实验,团队用一台 WowRobo 的 OpenArm 1.0 双臂和四个 Hexfellow PCW-25 动力脚轮搭建了一台移动机械臂,零件成本 9533.1 USD。他们训练了 ACT 策略,在图像和关节位置之外把关节力矩作为额外输入。每项任务试验 20 次,UME 策略在推箱子中的成功率为 0.90,翻箱子为 0.85,从约 5 mm 间隙中取出 GPU 为 0.95,长流程的冰箱取饮料为 0.95。同样的数据去掉力矩后得到 0.50、0、0.75 和 0.90,UMI 式的末端执行器基线得到 0.40、0、0 和 0。在翻箱子任务中,有力矩反馈时操作者每分钟采集的示范数是没有反馈时的 3.3 倍。项目网站有这些试验的视频。
为何重要
大多数低成本的机器人示范采集方式只记录位置。Mobile ALOHA 这类主从臂方案和 AirExo 这类被动外骨骼都无法让操作者感受到机器人遇到的力,UMI 式手持夹爪记录的是末端执行器位姿,手臂姿态要在运行时交给 IK 求解器。UME 补上了缺失的通道:操作者能感受到机器人的关节力矩,录制数据保留整条手臂的关节位置和力矩,因此模仿学习策略可以学会何时加大压力,以及如何在狭窄空间里让整条手臂避开障碍。在论文中,这一差别决定了翻箱子这类任务的成败,两个基线一次都没有成功。它的零件约 1900 USD,由市售执行器、PLA 和型材组成,CAD 和代码采用 Apache-2.0,已经在搭建 OpenArm 级机械臂的实验室完全可以复现;它的子机械臂重定向也是一套可复用的方法,可用于关节布局不同的机械臂之间的跨具身遥操作。目前的证据来自一个团队自己的移动机械臂,独立复现尚未出现。
解决的问题
用于采集机器人示范的遥操作装置和手持夹爪很少记录力:操作者感受不到机器人碰到了什么,推的动作不是过头就是半途停下,策略也从未从力矩中学习。UME 通过可穿戴的双臂外骨骼向操作者实时反馈关节力矩,并记录整条手臂的关节位置和力矩,使策略能学到柔顺、接触丰富的行为,以及在狭小空间中避免碰撞的手臂姿态。
要点
- 可穿戴双臂外骨骼,配有 16 个达妙准直驱执行器,把机器人的关节力矩反馈给操作者
- 关节轴线交于肩部和腕部中心,保留腕部全部活动范围和肩部大部分活动范围
- 子机械臂重定向可驱动 7-DoF 的 OpenArm 和 6-DoF 的 X-ARM,以及 MuJoCo 中的 Franka 机械臂
- 背部 IMU 在操作者倾斜身体时驱动移动底盘,实现全身遥操作
- 加入力矩训练的 ACT 策略在四项任务中达到 0.85 到 0.95 的成功率,而无力矩和 UMI 式基线表现不足
- 按论文约 1900 USD 零件成本,CAD、STL 和 STEP 文件采用 Apache-2.0,并附打印参数和配置指南
适用人群
- 为模仿学习采集接触丰富示范的机器人学习实验室
- 拥有 OpenArm 或其他使用达妙类执行器、能测力矩的机械臂,并希望实现力反馈遥操作的用户
- 研究双边遥操作、触觉反馈和柔顺操作的研究人员
- 搭建双臂移动机械臂、需要采集全身数据的团队
局限
- 策略只用一个团队自建移动机械臂的数据训练,目前还没有公开的外部复现
- 力矩反馈需要能测量关节力矩的从动机器人;在真实的 OpenArm 和 X-ARM 机械臂上展示过,Franka 只在仿真中展示
- 外骨骼约重 12 kg,需要 30 V 直流电源、CAN-FD 适配器和一台 Linux 主机,更像实验室装置而不是便携套件
- 仓库中没有物料表:成本来自论文附录 E.2,其中没有列出 CAD 和指南中出现的 4040 型材、角码和执行器配置适配器
- 配置依赖 Windows 版达妙调试工具和手动修改的归零脚本,完整演示还需要用 Hexfellow 脚轮搭建的移动底盘
- 没有发布数据集或训练好的检查点,仓库自 2026 年 7 月以来没有更新