2025年1月7日，由中新廣州知識城開發(fā)建設辦公室、西安電子科技大學廣州研究院以及海絲產教融合協(xié)同創(chuàng)新中心共同組織的“聚焦多模態(tài)雷視融合感知技術”的學術沙龍在西安電子科技大學廣州研究院成功舉辦。昱感微創(chuàng)始人&CEO蔣宏受邀出席演講，與廣研院師生分享了《“多維像素”多模態(tài)雷視融合感知技術——賦能AI機器視覺超級感知能力》主旨報告。

昱感微采用最前沿的多維像素多模態(tài)前融合技術，將可見光攝像頭、紅外攝像頭、4D毫米波雷達/激光雷達的探測數(shù)據(jù)在前端（數(shù)據(jù)獲取時）融合，并將各傳感器的探測數(shù)據(jù)“坐標統(tǒng)一、時序對齊”，最后以“多維像素”的數(shù)據(jù)格式輸出；昱感微的核心技術創(chuàng)新——“多維像素”，它是指在可見光攝像頭像素信息上加上其它傳感器對于同源目標感知的信息：圖像數(shù)據(jù)+雷達探測數(shù)據(jù)+紅外傳感器探測數(shù)據(jù)疊加，以攝像頭像素為顆粒度組合全部感知數(shù)據(jù)，形成多模態(tài)融合感知數(shù)據(jù)組合。在高分辨率寬動態(tài)的可見光攝像頭感知基礎上，雷達提供目標的距離、速度維度的精準感知還可以幫助可見光攝像頭克服天氣光線的影響，攝像頭的圖像又為雷達增添了語義信息，進一步提高雷達點云的置信度以及感知信息量；遠紅外攝像頭有針對性的目標熱輻射圖像感知則賦予了自動駕駛系統(tǒng)卓越的夜視能力。昱感微“多維像素”超級攝像頭就像是一雙比人眼更敏銳的眼睛，看到的不僅僅是一幅幅二維的圖像，還有更多維度的精確信息（目標的距離/速度/3D空間位置/溫度/材質等)，形成完整的多模態(tài)“視覺語言”，令自動駕駛系統(tǒng)可以精確全面地感知道路上各種狀況。（詳情可參見昱感微“多維像素”多模態(tài)融合感知展示）

分享結束后，與會師生積極提問，現(xiàn)場氣氛熱烈而有序。未來，隨著AI技術的不斷進步和應用場景的不斷拓展，多模態(tài)感知技術將在AI機器視覺領域發(fā)揮更加重要的作用。昱感微很榮幸能成為多模態(tài)感知技術的先行者，也期待有更多的合作伙伴加入到這一領域來，一起構建合作共贏的生態(tài)鏈，為客戶和彼此創(chuàng)造更高價值。

審核編輯 黃宇