quackd
Agente de línea de comandos que permite a un LLM manejar Microduck, brazos LeRobot y otros robots
Licencia
Apache-2.0
Resumen
quackd es una línea de comandos que pone a un gran modelo de lenguaje al mando de los robots que tienes. Cada robot se incorpora mediante un adaptador que declara qué cuerpo es y qué habilidades tiene; el LLM observa la cámara y el estado del robot y elige una de esas habilidades cada vez, y los propios controladores del robot se encargan de caminar y agarrar. Maneja el Microduck de Pollen Robotics, Open Duck Mini v2, un brazo LeRobot SO-101, XLeRobot, AlohaMini, ToddlerBot y cualquier base ROS 2 desde un portátil, por separado o varios a la vez, y puede pilotarse desde Claude a través de MCP. Apache-2.0, de Rok Benko.
quackd mantiene separadas las habilidades propias del robot y el criterio del LLM. Un adaptador publica un manifiesto de lo que puede hacer un cuerpo, como sentarse, levantarse, patear y graznar en un Microduck, o tomar y colocar en un brazo, y un verbo que no está en el manifiesto no existe. En cada turno, el LLM piloto ve el fotograma de la cámara, el estado y el último resultado, y elige un verbo con sus parámetros; quackd lo comprueba contra una lista de permitidos, un presupuesto y unas reglas de confirmación, lo ejecuta, observa el resultado y vuelve a preguntar hasta que la tarea está hecha o se considera imposible.
El piloto puede ser un modelo de uno de doce proveedores en la nube o uno local mediante Ollama, vLLM, llama.cpp o LM Studio, y Claude puede manejar un robot o toda una bandada a través del servidor MCP de quackd. Varios robots pueden compartir una tarea repartiéndose el trabajo, y las notas de ejecuciones anteriores se incorporan a la siguiente.
Sin robot, puedes probarlo en un simulador 2D de dibujos animados, en MuJoCo con la política de marcha entrenada del propio Microduck, en el simulador del brazo SO-101 o en una demo en el navegador. El README indica para cada robot hasta dónde ha llegado realmente: en la versión 0.32, uno de los nueve cuerpos, un brazo SO-101, ha funcionado en hardware real.
Por qué importa
Los robots abiertos pequeños como Microduck y Open Duck Mini vienen con un puñado de movimientos entrenados, pero sin forma de encadenarlos en una tarea. quackd les da un cerebro externo sin reentrenar nada: el LLM planifica, los propios controladores del robot mueven, y los mismos comandos funcionan en cuerpos muy distintos. Además, es inusualmente honesto sobre qué ha funcionado en hardware y qué solo en simulación.
Qué problema resuelve
Cada robot abierto trae su propio SDK y sus propios comportamientos fijos, así que pedirle a uno que encuentre una pelota y la patee, o a varios que trabajen juntos, implica escribir código de unión para cada cuerpo. quackd pone una sola línea de comandos y un solo conjunto de reglas delante de todos ellos, de modo que un objetivo expresado en palabras sencillas se convierte en una secuencia de las habilidades reales del robot.
Puntos clave
- Un LLM elige una de las habilidades propias del robot en cada paso; los controladores del robot se encargan del movimiento
- Nueve adaptadores de robots, entre ellos Microduck, Open Duck Mini v2, un brazo SO-101, XLeRobot y cualquier base ROS 2
- Funciona con doce proveedores de LLM en la nube o con modelos locales, y con Claude a través de MCP
- Varios robots pueden compartir una tarea, y la memoria lleva notas de una ejecución a otra
- Los simuladores 2D, MuJoCo y de navegador permiten probarlo sin robot
Para quién es
- Propietarios de robots abiertos pequeños como Microduck, Open Duck Mini o un brazo SO-101 que quieren que realicen tareas en lenguaje sencillo
- Desarrolladores que crean agentes LLM que actúan mediante habilidades reales de robots, incluso a través de MCP desde Claude
- Investigadores que prueban la coordinación de varios robots en simulación antes de pasar al hardware
Limitaciones
- Solo uno de los nueve cuerpos, un brazo SO-101, ha funcionado en hardware real (15 y 23 de septiembre de 2026); el propio Microduck solo ha funcionado en simulación
- El simulador predeterminado es un dibujo animado que prueba el bucle del agente, no la física; solo el Microduck y el brazo tienen simuladores físicos
- El éxito en una ejecución individual es la propia afirmación del LLM, contrastada con la realidad de referencia solo en simulación
- Las bandadas, el descubrimiento en LAN y el pasaporte de robot a robot solo han funcionado en una única máquina o en simulación
- Cada paso es una llamada al LLM, por lo que las ejecuciones cuestan tiempo de API y dinero, salvo que uses un modelo local
- Un proyecto joven: creado en agosto de 2026 y en rápida evolución