2025年1月7日，由中新廣州知識城開發(fā)建設(shè)辦公室、西安電子科技大學(xué)廣州研究院以及海絲產(chǎn)教融合協(xié)同創(chuàng)新中心共同組織的“聚焦多模態(tài)雷視融合感知技術(shù)”的學(xué)術(shù)沙龍在西安電子科技大學(xué)廣州研究院成功舉辦。昱感微創(chuàng)始人&CEO蔣宏受邀出席演講，與廣研院師生分享了《“多維像素”多模態(tài)雷視融合感知技術(shù)——賦能AI機(jī)器視覺超級感知能力》主旨報告。

昱感微采用最前沿的多維像素多模態(tài)前融合技術(shù)，將可見光攝像頭、紅外攝像頭、4D毫米波雷達(dá)/激光雷達(dá)的探測數(shù)據(jù)在前端（數(shù)據(jù)獲取時）融合，并將各傳感器的探測數(shù)據(jù)“坐標(biāo)統(tǒng)一、時序?qū)R”，最后以“多維像素”的數(shù)據(jù)格式輸出；昱感微的核心技術(shù)創(chuàng)新——“多維像素”，它是指在可見光攝像頭像素信息上加上其它傳感器對于同源目標(biāo)感知的信息：圖像數(shù)據(jù)+雷達(dá)探測數(shù)據(jù)+紅外傳感器探測數(shù)據(jù)疊加，以攝像頭像素為顆粒度組合全部感知數(shù)據(jù)，形成多模態(tài)融合感知數(shù)據(jù)組合。在高分辨率寬動態(tài)的可見光攝像頭感知基礎(chǔ)上，雷達(dá)提供目標(biāo)的距離、速度維度的精準(zhǔn)感知還可以幫助可見光攝像頭克服天氣光線的影響，攝像頭的圖像又為雷達(dá)增添了語義信息，進(jìn)一步提高雷達(dá)點(diǎn)云的置信度以及感知信息量；遠(yuǎn)紅外攝像頭有針對性的目標(biāo)熱輻射圖像感知則賦予了自動駕駛系統(tǒng)卓越的夜視能力。昱感微“多維像素”超級攝像頭就像是一雙比人眼更敏銳的眼睛，看到的不僅僅是一幅幅二維的圖像，還有更多維度的精確信息（目標(biāo)的距離/速度/3D空間位置/溫度/材質(zhì)等)，形成完整的多模態(tài)“視覺語言”，令自動駕駛系統(tǒng)可以精確全面地感知道路上各種狀況。（詳情可參見昱感微“多維像素”多模態(tài)融合感知展示）

分享結(jié)束后，與會師生積極提問，現(xiàn)場氣氛熱烈而有序。未來，隨著AI技術(shù)的不斷進(jìn)步和應(yīng)用場景的不斷拓展，多模態(tài)感知技術(shù)將在AI機(jī)器視覺領(lǐng)域發(fā)揮更加重要的作用。昱感微很榮幸能成為多模態(tài)感知技術(shù)的先行者，也期待有更多的合作伙伴加入到這一領(lǐng)域來，一起構(gòu)建合作共贏的生態(tài)鏈，為客戶和彼此創(chuàng)造更高價值。

審核編輯 黃宇