FAST-LIVO2

HKU-MARS의 빠른 다이렉트 LiDAR-관성-비주얼 오도메트리, IEEE T-RO 게재

라이선스

GPL-2.0

개요

FAST-LIVO2는 홍콩대학교 MaRS Lab(FAST-LIO를 만든 그룹)의 빠른 다이렉트 LiDAR-관성-비주얼 오도메트리 시스템으로, IEEE Transactions on Robotics에 게재되었습니다. 오차 상태 반복 칼만 필터(error-state iterated Kalman filter) 안에서 세 센서 스트림을 다이렉트 방식으로 긴밀하게 융합합니다 — 특징점 추출 없이 원시 LiDAR 포인트와 이미지 포토메트릭을 직접 사용해, LiDAR 단독 또는 비전 단독 시스템이 퇴화하는 환경에서도 강인한 실시간 추정을 달성하며, 공격적인 자율 비행을 위한 UAV 온보드 시연도 이루어졌습니다.

이 시스템의 설계 원칙은 다이렉트니스(directness)입니다: LiDAR 측정은 원시 포인트에 대한 plane-to-point 잔차로, 카메라는 온라인 노출 보정과 함께 맵 포인트에 대한 포토메트릭 오차로 기여합니다 — 특징점 검출을 완전히 생략함으로써 지연을 낮게 유지하고, 한 모달리티가 실패하는 텍스처 빈약·구조 빈약 장면에서도 강인성을 확보합니다. 통합 복셀 맵이 기하와 외관을 함께 보관하며, 하나의 오차 상태 반복 칼만 필터 안에서 순차 업데이트(LiDAR 다음 비전)가 이루어져 각 센서가 자신의 주기로 상태를 보정할 수 있습니다. 그 결과 임베디드 컴퓨터에서 실시간으로 동작하고, 좁은 FoV의 솔리드 스테이트 LiDAR(Livox)를 처리하며, 우아하게 성능이 저하됩니다: 시각적 암흑에서는 LiDAR가 시스템을 살려 두고, 긴 복도 같은 기하학적 퇴화 구간에서는 비전이 시스템을 지탱합니다. 저장소에는 ROS 통합, 데이터셋, 구성 파일이 포함되어 있으며, 동반되는 FAST-LIVO2 하드웨어/소프트웨어 스택은 연구실의 UAV 연구에 사용됩니다. FAST-LIO2와 함께, 긴밀 결합 LiDAR 융합 오도메트리의 레퍼런스 오픈 계보가 된 HKU-MARS 패밀리의 중심축입니다.

중요한 이유

FAST-LIVO2는 로보틱스에서 가장 영향력 있는 오픈 LiDAR 융합 계보(HKU-MARS)의 플래그십입니다: 3센서 다이렉트 융합을 임베디드 하드웨어에서 실용화한 T-RO 게재 시스템이자, 새로운 LIVO 논문마다 비교 기준으로 삼는 레퍼런스입니다.

해결하는 문제

LiDAR 오도메트리는 기하학적 퇴화에서 죽고, 비주얼 오도메트리는 어둠과 텍스처 빈약 장면에서 죽습니다. FAST-LIVO2는 LiDAR, 카메라, IMU를 충분히 긴밀하게 융합해 어느 한쪽의 실패 모드를 다른 센서가 커버하도록 합니다 — 그것도 소형 온보드 컴퓨터에서 실시간으로.

핵심 요점

• 하나의 오차 상태 반복 칼만 필터에서 LiDAR-관성-비주얼 긴밀 결합 융합
• 원시 포인트와 포토메트릭에 대한 다이렉트 방식 — 특징점 추출 없음
• 온라인 노출 추정과 함께 기하·외관을 담는 통합 복셀 맵
• 임베디드 컴퓨터에서 실시간 동작; UAV 온보드 자율 비행으로 검증
• FAST-LIO 패밀리 연구실(HKU-MARS)에서 IEEE T-RO 게재

대상

• SLAM 및 상태 추정 연구자
• UAV 및 모바일 로봇 자율성 엔지니어
• 솔리드 스테이트 LiDAR와 카메라를 융합하는 팀
• 다중 센서 융합 전공 대학원생

한계

• GPL-2.0 라이선스로 클로즈드 소스 사용 제한
• 세심한 센서 동기화와 캘리브레이션이 전제 조건
• 주로 Livox급 솔리드 스테이트 LiDAR 중심으로 튜닝됨