FAST-LIVO2

Odometria LiDAR-inercial-visual rápida e direta do HKU-MARS, publicada na IEEE T-RO

Licença

GPL-2.0

Visão geral

O FAST-LIVO2, do MaRS Lab da Universidade de Hong Kong (o grupo por trás do FAST-LIO), é um sistema rápido e direto de odometria LiDAR-inercial-visual publicado na IEEE Transactions on Robotics. Ele funde de forma fortemente acoplada os três fluxos de sensores em um filtro de Kalman iterado de estado de erro usando métodos diretos — pontos brutos de lidar e fotometria de imagem, sem extração de features — alcançando estimação robusta em tempo real em ambientes onde sistemas apenas de lidar ou apenas visuais degeneram, e já foi demonstrado embarcado em UAVs para voo autônomo agressivo.

O princípio de design do sistema é ser direto: as medições do lidar contribuem com resíduos plano-a-ponto sobre pontos brutos, e a câmera contribui com erros fotométricos sobre pontos do mapa com compensação de exposição estimada online — pular completamente a detecção de features mantém a latência baixa e a robustez alta em cenas pobres em textura ou em estrutura, onde uma modalidade falha. Um mapa de voxels unificado mantém geometria e aparência juntas; a ordem sequencial de atualização (lidar, depois visão) dentro de um único filtro de Kalman iterado de estado de erro permite que cada sensor corrija o estado na sua própria taxa. O resultado roda em tempo real em computadores embarcados, lida com lidars de estado sólido de FoV pequeno (Livox) e degrada graciosamente: o lidar mantém o sistema vivo na escuridão visual, e a visão o carrega através de degenerescência geométrica, como corredores longos. O repositório traz integração com ROS, datasets e configurações, com a stack de hardware/software companheira do FAST-LIVO2 usada no trabalho com UAVs do laboratório. Ao lado do FAST-LIO2, ele ancora a família HKU-MARS, que se tornou a linhagem aberta de referência em odometria por fusão de lidar fortemente acoplada.

Por que importa

O FAST-LIVO2 é o carro-chefe da linhagem aberta de fusão de lidar mais influente da robótica (HKU-MARS): um sistema publicado na T-RO que tornou a fusão direta de três sensores prática em hardware embarcado, e o ponto de referência contra o qual todo novo artigo de LIVO se mede.

Problema que resolve

A odometria por lidar morre em degenerescência geométrica; a odometria visual morre no escuro e em cenas pobres em textura. O FAST-LIVO2 funde lidar, câmera e IMU de forma suficientemente acoplada para que cada modo de falha seja coberto pelo outro sensor — em tempo real, em pequenos computadores embarcados.

Pontos principais

• Fusão LiDAR-inercial-visual fortemente acoplada em um único filtro de Kalman iterado de estado de erro
• Métodos diretos sobre pontos brutos e fotometria — sem extração de features
• Mapa de voxels unificado com geometria e aparência e estimação de exposição online
• Tempo real em computadores embarcados; comprovado embarcado em UAVs em voo autônomo
• Publicado na IEEE T-RO pelo laboratório da família FAST-LIO (HKU-MARS)

Para quem é

• Pesquisadores de SLAM e estimação de estado
• Engenheiros de autonomia de UAVs e robôs móveis
• Equipes fundindo lidars de estado sólido com câmeras
• Estudantes de pós-graduação em fusão multissensor

Limitações

• A licença GPL-2.0 restringe o uso em código fechado
• Sincronização e calibração cuidadosas dos sensores são pré-requisitos
• Ajustado primariamente para lidars de estado sólido da classe Livox