Open Source Robotics

高品質なオープンソースロボティクスプロジェクト、ツール、ソフトウェアの厳選コレクション。

quackd

LLM に Microduck、LeRobot アーム、その他のロボットを操縦させるコマンドラインエージェントです

ライセンス

Apache-2.0

概要

quackd は、手持ちのロボットの操縦を大規模言語モデルに任せるコマンドラインツールです。各ロボットはアダプターを介して参加し、アダプターはその機体が何であり、どのスキルを持つかを宣言します。LLM はカメラとロボットの状態を見て、それらのスキルを一度に一つずつ選び、歩行や把持はロボット自身のコントローラーが行います。Pollen Robotics の Microduck、Open Duck Mini v2、LeRobot SO-101 アーム、XLeRobot、AlohaMini、ToddlerBot、および任意の ROS 2 ベースをノートPCから単独でも複数台同時にでも操縦でき、MCP 経由で Claude から操縦することもできます。Apache-2.0、作者は Rok Benko です。

quackd は、ロボット自身のスキルと LLM の判断を分けて扱います。アダプターは、機体ができることのマニフェストを公開します。たとえば Microduck なら座る、立つ、蹴る、鳴く、アームなら掴んで置く、といったもので、マニフェストにない動詞は存在しません。各ターンで、パイロットの LLM はカメラフレーム、状態、直前の結果を見て、パラメーター付きの動詞を一つ選びます。quackd はそれを許可リスト、予算、確認ルールと照合して実行し、結果を観察し、タスクが完了するか不可能と判断されるまで再び問い合わせます。

パイロットには十二のクラウドベンダーいずれかのモデル、または Ollama、vLLM、llama.cpp、LM Studio を介したローカルモデルを使えます。また Claude は quackd の MCP サーバーを通じて、ロボット一台または群れ全体を操縦できます。複数のロボットが作業を分担して一つのタスクを共有でき、過去の実行で得たメモは次の実行に引き継がれます。

ロボットがなくても、2D のカートゥーンシミュレーター、Microduck 自身の学習済み歩行ポリシーを動かす MuJoCo、SO-101 アームのシミュレーター、またはブラウザーデモで試せます。README にはロボットごとに実際どこまで到達したかが記されており、バージョン 0.32 では、九つの機体のうち SO-101 アーム一つだけが実機で動作しています。

重要な理由

Microduck や Open Duck Mini のような小型のオープンロボットには、学習済みの動作がいくつか付属していますが、それらをつなげてタスクにする手段がありません。quackd は何も再学習せずに外部の頭脳を与えます。LLM が計画し、ロボット自身のコントローラーが動かし、同じコマンドがまったく異なる機体で機能します。また、何が実機で動作し、何がシミュレーションでしか動作していないかについて、珍しいほど正直です。

解決する課題

オープンロボットはそれぞれ独自の SDK と固定された動作を持っているため、一台にボールを見つけて蹴らせたり、複数台を協調させたりするには、機体ごとにグルーコードを書く必要があります。quackd はそのすべての前に一つのコマンドラインと一つのルールセットを置くので、平易な言葉で書いた目標がロボットの実際のスキルの並びになります。

主なポイント

  • LLM がステップごとにロボット自身のスキルを一つ選び、動作はロボットのコントローラーが行います
  • Microduck、Open Duck Mini v2、SO-101 アーム、XLeRobot、任意の ROS 2 ベースを含む九つのロボットアダプターがあります
  • 十二のクラウド LLM ベンダーやローカルモデル、そして MCP 経由の Claude で動作します
  • 複数のロボットが一つのタスクを共有でき、メモリーが実行間でメモを引き継ぎます
  • 2D、MuJoCo、ブラウザーのシミュレーターで、ロボットなしで試せます

対象

  • Microduck、Open Duck Mini、SO-101 アームなどの小型オープンロボットを所有し、平易な言葉でタスクを実行させたい人
  • Claude から MCP 経由で操作する場合も含め、実際のロボットスキルを通じて行動する LLM エージェントを開発する開発者
  • 実機の前にシミュレーションでマルチロボット協調を試す研究者

制限事項

  • 九つの機体のうち実機で動作したのは SO-101 アーム一つだけです(2026年9月15日と23日)。Microduck 自体はシミュレーションでしか動作していません
  • デフォルトのシミュレーターはエージェントループをテストするカートゥーンであり、物理はテストしません。物理シミュレーターがあるのは Microduck とアームだけです
  • 単独実行の成功は LLM 自身の申告であり、正解データと照合されるのはシミュレーションの中だけです
  • 群れ、LAN 探索、ロボット間パスポートは、一台のマシン上かシミュレーションでしか動作していません
  • 各ステップが LLM 呼び出しであるため、ローカルモデルを使わない限り、実行には API の時間と費用がかかります
  • 若いプロジェクトです。2026年8月に作成され、急速に変化しています

このウェブサイトにはJavaScriptが必要です。オープンソースロボティクスプロジェクトを閲覧するにはJavaScriptを有効にしてください。