FAST-LIVO2

Odométrie LiDAR-inertielle-visuelle directe et rapide de HKU-MARS, publiée dans IEEE T-RO

Licence

GPL-2.0

Aperçu

FAST-LIVO2, du MaRS Lab de l'Université de Hong Kong (le groupe derrière FAST-LIO), est un système d'odométrie LiDAR-inertielle-visuelle directe et rapide, publié dans IEEE Transactions on Robotics. Il fusionne étroitement les trois flux de capteurs dans un filtre de Kalman itéré à état d'erreur au moyen de méthodes directes — points lidar bruts et photométrie image, sans extraction de caractéristiques — pour obtenir une estimation temps réel robuste dans les environnements où les systèmes lidar seuls ou visuels seuls dégénèrent, et il a été démontré à bord de drones pour du vol autonome agressif.

Le principe de conception du système est la directitude : les mesures lidar contribuent des résidus plan-point sur les points bruts, et la caméra apporte des erreurs photométriques sur les points de carte avec compensation d'exposition estimée en ligne — l'absence totale de détection de caractéristiques maintient une latence faible et une robustesse élevée dans les scènes pauvres en texture ou en structure où une modalité échoue. Une carte voxel unifiée regroupe géométrie et apparence ; l'ordre de mise à jour séquentiel (lidar, puis vision) au sein d'un même filtre de Kalman itéré à état d'erreur permet à chaque capteur de corriger l'état à son propre rythme. Le résultat tourne en temps réel sur des ordinateurs embarqués, gère les lidars à état solide à petit FoV (Livox) et se dégrade gracieusement : le lidar maintient le système en vie dans l'obscurité visuelle, la vision le porte à travers les dégénérescences géométriques comme les longs couloirs. Le dépôt fournit l'intégration ROS, des datasets et des configurations, avec la pile matérielle/logicielle compagnon FAST-LIVO2 utilisée dans les travaux UAV du laboratoire. Aux côtés de FAST-LIO2, il ancre la famille HKU-MARS devenue la lignée ouverte de référence pour l'odométrie par fusion lidar étroitement couplée.

Pourquoi c'est important

FAST-LIVO2 est le vaisseau amiral de la lignée ouverte de fusion lidar la plus influente en robotique (HKU-MARS) : un système publié dans T-RO qui a rendu la fusion directe à trois capteurs praticable sur du matériel embarqué, et le point de référence auquel chaque nouvel article LIVO se mesure.

Le problème résolu

L'odométrie lidar meurt dans les dégénérescences géométriques ; l'odométrie visuelle meurt dans l'obscurité et les scènes pauvres en texture. FAST-LIVO2 fusionne lidar, caméra et IMU assez étroitement pour que chaque mode de défaillance soit couvert par l'autre capteur — en temps réel sur de petits ordinateurs embarqués.

Points clés

• Fusion LiDAR-inertielle-visuelle étroitement couplée dans un seul filtre de Kalman itéré à état d'erreur
• Méthodes directes sur points bruts et photométrie — sans extraction de caractéristiques
• Carte voxel unifiée regroupant géométrie et apparence avec estimation d'exposition en ligne
• Temps réel sur ordinateurs embarqués ; prouvé à bord de drones en vol autonome
• Publié dans IEEE T-RO par le laboratoire de la famille FAST-LIO (HKU-MARS)

Pour qui

• Chercheurs en SLAM et en estimation d'état
• Ingénieurs en autonomie de drones et de robots mobiles
• Équipes fusionnant lidars à état solide et caméras
• Étudiants de troisième cycle en fusion multi-capteurs

Limites

• La licence GPL-2.0 restreint l'usage en code fermé
• Une synchronisation et une calibration soignées des capteurs sont des prérequis
• Réglé principalement autour des lidars à état solide de classe Livox