Fusion de capteurs

Combinaison de mesures de plusieurs capteurs (caméras, LIDAR, radar, GPS) en une estimation cohérente de l'environnement pour perception et contrôle.

La fusion de capteurs fusionne des données de modalités différentes pour que le système voie une scène cohérente plutôt que des instantanés contradictoires. Un nuage LIDAR peut définir la géométrie des obstacles tandis que les caméras lisent marquages et feux ; le radar peut suivre des véhicules en mouvement malgré poussière ou éblouissement. Filtres et recalage alignent horodatages et coordonnées pour que planificateurs et contrôleurs agissent sur un modèle unifié.

Les piles de conduite autonome au DARPA Urban Challenge 2007 comptaient sur la fusion en trafic mixte robot et humain. Les pipelines d’apprentissage profond ultérieurs apprennent souvent la fusion implicitement, mais l’estimation d’état multi-capteurs fiable reste un problème d’ingénierie.