隨著各類終端應(yīng)用場(chǎng)景愈發(fā)多元化，對(duì)視覺(jué)傳感器的技術(shù)升級(jí)訴求，也不僅僅只停留在像素、進(jìn)光量、白平衡等一些基礎(chǔ)參數(shù)的改善，而是要求產(chǎn)品能更智能、更全面的應(yīng)對(duì)復(fù)雜多變的外部環(huán)境。

例如：在 AR/VR 這類頭顯設(shè)備中，眼球追蹤技術(shù)一直是終端升級(jí)的重要環(huán)節(jié)。一方面是由于每位用戶的體征各不相同，常規(guī)的眼球追蹤技術(shù)無(wú)法實(shí)現(xiàn)大規(guī)模適配；另一方面在注視點(diǎn)渲染這類場(chǎng)景當(dāng)中，對(duì)傳感器眼球追蹤功能的低延遲、準(zhǔn)確度以及可預(yù)測(cè)等效果提出了嚴(yán)苛的要求。

另外在智能手機(jī)領(lǐng)域，越來(lái)越多的用戶希望能通過(guò)手機(jī)端完成光攝影、較暗室內(nèi)環(huán)境拍攝、戶外靜態(tài)攝影等專業(yè)性較高的拍攝，甚至是對(duì)超高速運(yùn)動(dòng)中的物體進(jìn)行實(shí)時(shí)攝影。這類應(yīng)用不僅要求傳感器提供足夠大的動(dòng)態(tài)范圍，從而更全面、細(xì)致地實(shí)現(xiàn)場(chǎng)景覆蓋；還要求傳感器在拍攝對(duì)象高速運(yùn)動(dòng)時(shí)，能提供清晰、精確的圖像處理結(jié)果。

除上述外，包括 ADAS、機(jī)器視覺(jué)、物體追蹤等多種應(yīng)用為了進(jìn)一步優(yōu)化用戶體驗(yàn)，同樣需要一顆足夠強(qiáng)大的視覺(jué)處理器，為其升級(jí)提供支持。

針對(duì)這些特定場(chǎng)景衍生出的需求，豪威集團(tuán)近日發(fā)布了世界首款產(chǎn)品級(jí) CIS/EVS 融合視覺(jué)芯片 OV60B10。通過(guò)對(duì)兩者的融合，在一顆芯片上集合兩類傳感器的特性。

EVS （Event-Based Vision Sensors） 是一種生物啟發(fā)的新型視覺(jué)傳感器，具備基于事件的視覺(jué)、可實(shí)現(xiàn)高動(dòng)態(tài)范圍、保持高速、低延遲、無(wú)運(yùn)動(dòng)模糊，且同時(shí)滿足低數(shù)據(jù)率、低功耗的技術(shù)特點(diǎn)。與廣泛應(yīng)用的 CIS （CMOS Image Sensor） 相比，事件相機(jī)的輸出在空間和時(shí)間上具有連續(xù)性，其響應(yīng)速度不受傳統(tǒng)的曝光時(shí)間和幀率限制，可以檢測(cè)到快如子彈的超高速運(yùn)動(dòng)，而使用 CIS 相機(jī)則需要以幾千或幾萬(wàn)幀/秒的速率才能捕捉得到；不受白平衡、感光度、曝光時(shí)間等統(tǒng)一成像參數(shù)影響，在圖像過(guò)暗、過(guò)曝或急劇變化等情況下，依然可以觸發(fā)事件來(lái)獲取視覺(jué)信息。

技術(shù)亮點(diǎn)

1、3D Stack工藝

OV60B10 芯片采用了 3D Stack 工藝制造，通過(guò)將 CIS，EVS，ISP/ESP 三層wafer整合到性能最優(yōu)、體積最小的狀態(tài)。wafer 間通過(guò)混合鍵合技術(shù)實(shí)現(xiàn)高密度的像素級(jí)連接，該工藝由于探測(cè)器部分和電路部分各自獨(dú)立，從而實(shí)現(xiàn)加工工藝的分別優(yōu)化和像素單元尺寸的最小化。

2、像素級(jí)傳感器融合

OV60B10 芯片能夠通過(guò)兩種傳感器共享焦平面，有多重信號(hào)交互，從而在時(shí)間和空間上高精度匹配，協(xié)同工作，并行輸出（也能通過(guò)軟件配置，分別獨(dú)立工作）。

通過(guò)像素級(jí)傳感器融合技術(shù)，將兩種傳感器優(yōu)點(diǎn)做到最大化，充分利用圖像中的冗余信息及互補(bǔ)信息，產(chǎn)生一幅滿足特定應(yīng)用需要的圖像，通過(guò)這樣的方式，對(duì)同一場(chǎng)景或目標(biāo)進(jìn)行更準(zhǔn)確、更全面、更可靠的描述。

3、世界領(lǐng)先的 EVS 技術(shù)

OV60B10 芯片采用豪威集團(tuán)獨(dú)有的 in-pixel timestamp 及相關(guān)的高速讀出技術(shù)，相對(duì)于業(yè)界已有的 timestamping-during-readout 方式，能大幅提高EVS的時(shí)間標(biāo)精度，并降低時(shí)間標(biāo)的抖動(dòng)（jitter）。OV60B10 也創(chuàng)新了噪聲控制、多通道讀出、事件編碼和動(dòng)態(tài)帶寬等一系列技術(shù)。

每秒鐘幀數(shù)越多，畫面所顯示的動(dòng)作就會(huì)越流暢。通過(guò)獨(dú)家的 EVS 技術(shù)，OV60B10 對(duì)原始幀率僅有 120FPS 的畫面進(jìn)行重構(gòu)后，幀率可達(dá) 10000FPS，終端可借由這顆傳感器用更少的數(shù)據(jù)、更小的計(jì)算量和更低的硬件成本捕捉高速圖像。

4、優(yōu)秀的CIS成像性能

OV60B10 芯片還使用業(yè)界領(lǐng)先的 CIS 平臺(tái)，兼具高分辨率 （1500萬(wàn)像素）和大像素 （2.2um） 優(yōu)勢(shì)。

綜上來(lái)看，OV60B10 芯片讓具有高效地捕捉場(chǎng)景變化、低延遲、低數(shù)據(jù)量等特質(zhì)的事件相機(jī)與高分辨率和大像素的 CIS 各展所長(zhǎng)，適用于超高速圖像重構(gòu)、高動(dòng)態(tài)范圍成像、ADAS、智能座艙、眼球追蹤、物體追蹤、SLAM 等多種場(chǎng)景，以“組合拳”的方式讓用戶靈活應(yīng)對(duì)手機(jī)、汽車、AR/VR等不同領(lǐng)域的拍攝需求。

站在終端的角度，這顆各項(xiàng)性能表現(xiàn)都十分突出的視覺(jué)傳感器也能助其進(jìn)行更深層次的產(chǎn)品開(kāi)發(fā)和挖掘。

業(yè)界周知，“元宇宙”概念興起再度讓 AR/VR 設(shè)備受到高度關(guān)注，然而長(zhǎng)期以來(lái)，這類設(shè)備的發(fā)展都受制于內(nèi)容和交互體驗(yàn)的缺乏。眼下終端就可以借助 OV60B10 超高速圖像重構(gòu)、低延遲等功能實(shí)現(xiàn)高精度、高速度的動(dòng)作捕捉，從而為用戶提供更流暢、更沉浸、更豐富的游戲場(chǎng)景。更加深入“元宇宙”概念甚至可以發(fā)現(xiàn)，動(dòng)作軌跡捕捉的精準(zhǔn)度其實(shí)決定了用戶動(dòng)作、表情等指標(biāo)實(shí)現(xiàn)數(shù)字化的程度，而數(shù)字化程度，也決定了用戶能否在數(shù)字世界中呈現(xiàn)出自己獨(dú)特的形象并實(shí)現(xiàn)交互。