Open Source Robotics

고품질 오픈소스 로봇 프로젝트, 도구 및 소프트웨어의 엄선된 컬렉션.

FPGA

  • 다른 이름: field-programmable gate array
  • 카테고리: Control › Feedback control
  • 태그: embedded-hardware, hardware-acceleration, edge-computing, real-time, neural-network-inference

field-programmable gate array: 구성 가능한 논리, 메모리, 배선으로 이루어진 칩으로, 프로그램을 실행하는 대신 구성을 불러들여 맞춤형 디지털 회로로 연결된다.

정의

FPGA(field-programmable gate array)는 제조된 뒤에 논리가 정해지는 집적 회로이다. 룩업 테이블과 플립플롭으로 만든 작은 구성 가능 논리 블록이 대규모 배열을 이루고, 이들이 프로그래밍 가능한 배선으로 연결되어 있으며, 온칩 RAM, 곱셈-누산(DSP) 유닛, 클록 관리자, 고속 I/O 같은 전용 블록도 함께 들어 있다. 비트스트림이라 불리는 구성 파일이 모든 룩업 테이블과 배선 스위치를 설정하여, 칩이 특정한 디지털 회로처럼 동작하게 한다. 대부분의 소자에서 구성은 휘발성 메모리에 저장되며 전원을 켤 때 플래시에서 다시 읽어 들인다.

설계는 Verilog나 VHDL 같은 하드웨어 기술 언어로 작성하거나, 고수준 합성을 통해 C나 C++로 작성하며, 그다음 제조사 도구로 합성, 배치, 배선을 거치는데, 이 과정은 몇 분에서 몇 시간이 걸릴 수 있다. 명령어를 실행하는 CPU나 GPU와 달리, FPGA는 계산 자체를 하드웨어로 구현한다. 매 클록 주기마다 많은 연산이 병렬로 실행되고, 데이터는 파이프라인을 따라 흐르며, 타이밍은 클록 주기 단위로 고정된다. 클록 속도는 CPU보다 낮고 온칩 메모리는 작아서, 큰 모델이나 데이터는 외부 메모리에서 스트리밍해야 하며 이것이 처리량을 제한한다. Xilinx Zynq 제품군 같은 SoC FPGA는 프로그래밍 가능한 패브릭과 ARM 프로세서 코어를 한 칩에 결합하여, 맞춤형 하드웨어 옆에서 Linux와 ROS를 실행할 수 있게 한다.

이런 특성 때문에 FPGA는 지연 시간이 짧고 예측 가능해야 하는 곳, 단순한 연산이 많이 병렬로 실행되는 곳, 데이터 폭이 특이한 곳에서 강하다. 로봇공학에서 FPGA는 모터 드라이브용 PWM을 생성하고 전류 루프를 실행하며, 인코더를 디코딩하고, 카메라, LiDAR, 이벤트 카메라 스트림을 읽어 전처리하고, 스테레오 시차를 계산하고, 낮은 정밀도로 양자화한 신경망을 실행한다. 이진화 신경망은 특히 잘 맞는데, 곱셈-누산 연산이 룩업 테이블에 바로 대응하는 XNOR와 비트 계수 논리로 줄어들기 때문이다.

중요한 이유

로봇에는 센서와 액추에이터 가까이에서 빠르고 결정론적인 처리가 필요하며, 흔히 빠듯한 전력 예산 안에서 그래야 한다. FPGA는 너무 느릴 수 있는 마이크로컨트롤러, 전력을 더 쓰고 지연 시간을 예측하기 어려운 GPU, 소량 생산하기에는 너무 비싼 맞춤형 칩(ASIC) 사이의 빈틈을 메운다.

주요 응용

  • 모터 드라이브: PWM 생성, 전류 루프, 인코더 디코딩
  • 카메라, LiDAR, 이벤트 카메라 데이터의 저지연 전처리
  • 소형 로봇의 시각 주행거리계를 위한 스테레오 깊이 계산과 특징 추출
  • 임베디드 로봇에서의 양자화 및 이진화 신경망 추론
  • CNC 기계와 산업용 모션 제어를 위한 실시간 I/O
  • 우주 로봇을 위한 내방사선 처리

실제 사례

한 휴머노이드의 손-눈 파이프라인이 SoC FPGA 보드에서 실행된다. ARM 코어는 상위 수준 제어를 위한 Linux와 ROS 노드를 실행하고, 패브릭에는 카메라 프레임을 직접 받아 크기를 조정한 뒤 가중치가 온칩 RAM에 들어가는 부분 이진화 오토인코더에 넣는 파이프라인이 들어 있다. 엔지니어들은 먼저 소프트웨어에서 신경망을 양자화하고 정확도가 유지되는지 확인한 다음, 고수준 합성 도구로 하드웨어를 생성하고 타이밍을 검증한다. 잠재 특징은 매 프레임 고정된 지연으로 제어기에 도달하며, 전력은 GPU가 쓸 전력의 일부에 불과하지만, 신경망을 바꿀 때마다 합성을 다시 돌려야 한다.

흔한 오해

  • FPGA는 빠른 프로세서처럼 프로그램을 실행한다 — FPGA는 회로로 구성되며, 소프트웨어는 하드 코어이든 패브릭으로 만든 코어이든 프로세서 코어를 통해서만 그 위에서 실행된다
  • FPGA는 언제나 GPU보다 빠르다 — 대규모 부동소수점 작업에서는 보통 GPU가 앞서고, FPGA는 지연 시간, 결정론성, 저정밀 스트리밍에서 앞선다
  • FPGA 설계를 바꾸는 것은 소프트웨어를 다시 컴파일하는 것과 같다 — 합성과 배치 및 배선은 느리며, 설계는 타이밍을 만족해야 한다
  • 온칩 메모리는 넉넉하다 — 온칩 메모리는 작으므로, 큰 신경망에는 외부 메모리나 공격적인 양자화가 필요하다

알아야 할 사람

  • 로봇 제어기를 설계하는 임베디드 및 전자 엔지니어
  • 인식 파이프라인을 저전력 하드웨어로 옮기는 인식 엔지니어
  • 양자화 신경망을 로봇에 배치하는 연구자
  • 모터 드라이브와 모션 제어 설계자

관련 기술

  • Verilog와 VHDL
  • 고수준 합성(HLS)
  • Xilinx Zynq 같은 SoC FPGA
  • FINN 이진화 신경망 프레임워크
  • GPU
  • ASIC

관련 용어

  • BLDC Motor
  • Encoder
  • PID Controller
  • Event Camera
  • Visual Odometry

관련 프로젝트

  • GENESIS: World's fastest physics engine: 43M FPS for embodied AI learning
  • Cartographer: Google's real-time 2D and 3D SLAM system for multi-platform robotics
  • FAST-LIVO2: Fast, direct LiDAR-inertial-visual odometry from HKU-MARS, published in IEEE T-RO
  • Dora AI: Dataflow middleware for AI robotics applications, built in Rust
  • OpenMind OM1: AI-native operating system for robots with modular perception, cognition, and action
  • Fast DDS: eProsima's high-performance DDS middleware — the default transport under ROS 2

동영상

  • EEVblog #496 - What Is An FPGA?: EEVblog
  • Introduction to FPGA Part 1 - What is an FPGA? | Digi-Key Electronics: DigiKey

이 웹사이트는 JavaScript가 필요합니다. 오픈소스 로봇 프로젝트를 탐색하려면 JavaScript를 활성화하세요.