首頁 / 名詞卡 / 深度學習/NLP/CV架構 / 感測融合(Sensor Fusion)

iPAS AI中級🧬 深度學習/NLP/CV架構
🔑 名詞卡

感測融合(Sensor Fusion)

🎯 定義

將來自不同感測器(如雷達、超音波、GPS、加速度計)的異質資料,透過資料同步與特徵對齊技術,整合至統一模型中的技術,用於提升環境感知能力。

兩種融合方式

方式整合層級
早期融合(Early Fusion)資料層級整合(原始資料先合併)
晚期融合(Late Fusion)特徵層級整合(各模態先萃取特徵再合併)

應用

智慧城市(監視影像+空氣品質/交通感測)、智慧醫療(醫學影像+生命徵象)、自動駕駛(攝影機+雷達+超音波)。

記憶技巧

早期融合=「食材先混在一起煮」;晚期融合=「各自煮熟後再擺盤」。

易混淆

  • vs 跨模態表示學習:感測融合偏重「感測器等物理訊號」的整合,跨模態表示學習偏重「語意層級」的映射對齊(如文字與影像),兩者概念層次不同但常搭配使用。
📖 課文原文

「此類融合依賴感測融合(Sensor Fusion)技術,透過資料同步與特徵對齊,將異質資料整合至統一模型中。常見方法包括早期融合(Early Fusion,資料層級整合)與晚期融合(Late Fusion,特徵層級整合)。」