Open Source Robotics

Una raccolta curata di progetti, strumenti e software di robotica open source di alta qualità per la comunità della robotica.

Code as Policies: Language Model Programs for Embodied Control

Autori: Jacky Liang, Wenlong Huang, Fei Xia, Peng Xu, Karol Hausman, Brian Ichter, Pete Florence, Andy Zeng · ICRA 2023

ICRA 2023

Licenze

  • Open access
  • Articolo: arXiv.org perpetual, non-exclusive license 1.0

In base alla licenza di arXiv, tutto ciò che segue è scritto solo a partire dall'abstract.

Perché è importante

Mostra che i modelli linguistici addestrati a scrivere codice possono essere riutilizzati per scrivere codice di policy robotiche a partire da comandi in linguaggio naturale, producendo policy che ragionano nello spazio e generalizzano a nuove istruzioni.

Soluzione proposta

A un modello linguistico che scrive codice si dà un prompt few-shot con comandi di esempio in linguaggio (come commenti) seguiti dal codice di policy corrispondente; per un nuovo comando, ricompone chiamate API in nuovo codice di policy che elabora gli output della percezione e imposta i parametri delle primitive di controllo, usando strutture logiche e librerie come NumPy e Shapely. Al centro dell'approccio c'è la generazione gerarchica del codice, che definisce in modo ricorsivo le funzioni non ancora definite, così da poter scrivere codice più complesso.

Abstract

È stato dimostrato che i modelli linguistici di grandi dimensioni (LLM) addestrati al completamento del codice sono in grado di sintetizzare semplici programmi Python a partire dalle docstring. Scopriamo che questi LLM che scrivono codice possono essere riadattati per scrivere codice di policy robotiche, dati comandi in linguaggio naturale. Nello specifico, il codice di policy può esprimere funzioni o cicli di retroazione che elaborano gli output della percezione e parametrizzano API di primitive di controllo. Quando ricevono in input alcuni comandi linguistici di esempio seguiti dal corrispondente codice di policy, gli LLM possono accogliere nuovi comandi e ricomporre autonomamente chiamate API per generare nuovo codice di policy. Concatenando strutture logiche classiche e facendo riferimento a librerie di terze parti per eseguire calcoli aritmetici, gli LLM usati in questo modo possono scrivere policy robotiche che mostrano ragionamento spaziale-geometrico, generalizzano a nuove istruzioni e assegnano valori precisi a descrizioni ambigue a seconda del contesto.

Link

  • arXiv 2209.07753: https://arxiv.org/abs/2209.07753
  • PDF: https://arxiv.org/pdf/2209.07753
  • Codice: https://github.com/google-research/google-research/tree/master/code_as_policies
  • Pagina del progetto: https://code-as-policies.github.io/

Questo sito richiede JavaScript. Attiva JavaScript per esplorare i nostri progetti di robotica open source.