這款全球最小基于事件的最新款Metavision視覺(jué)傳感器GenX320，提供了全新的性能水平，包括：超低功耗、低延遲、高靈活性，可以高效嵌入增強(qiáng)現(xiàn)實(shí)/虛擬現(xiàn)實(shí)（AR/VR）設(shè)備、可穿戴設(shè)備、安防監(jiān)控系統(tǒng)、無(wú)接觸交互接口以及“永久在線（always-on）”物聯(lián)網(wǎng)等應(yīng)用。

據(jù)麥姆斯咨詢報(bào)道，全球最先進(jìn)神經(jīng)形態(tài)視覺(jué)系統(tǒng)的發(fā)明者Prophesee近日宣布推出基于事件的新款Metavision視覺(jué)傳感器：GenX320，這是業(yè)界首款專門(mén)為超低功耗邊緣人工智能（Edge AI）視覺(jué)設(shè)備而開(kāi)發(fā)的基于事件的視覺(jué)傳感器。這款第五代Metavision傳感器的芯片尺寸為3 mm x 4 mm，將Prophesee開(kāi)創(chuàng)性的技術(shù)平臺(tái)擴(kuò)展到了一系列快速增長(zhǎng)的Edge AI細(xì)分市場(chǎng)，包括：AR/VR設(shè)備、安防監(jiān)控/檢測(cè)系統(tǒng)、無(wú)需觸摸顯示器、眼動(dòng)追蹤、“永久在線”智能物聯(lián)網(wǎng)設(shè)備等。

基于事件的視覺(jué)傳感器GenX320基于Prophesee在該領(lǐng)域的專業(yè)積累，已經(jīng)成功為各種應(yīng)用提供基于事件視覺(jué)的速度、低延遲、動(dòng)態(tài)范圍、功率效率和隱私保護(hù)優(yōu)勢(shì)。

這款320 × 320 6.3 μm像素背照（BSI）堆疊式基于事件的視覺(jué)傳感器，提供了微小的1/5”光學(xué)格式。這款視覺(jué)傳感器特別針對(duì)嵌入式邊緣視覺(jué)系統(tǒng)高效集成創(chuàng)新事件傳感的獨(dú)特需求而開(kāi)發(fā)，這些系統(tǒng)往往在供能、計(jì)算和尺寸方面捉襟見(jiàn)肘。GenX320能夠在超低功率及具有挑戰(zhàn)性的工作和照明條件下實(shí)現(xiàn)穩(wěn)健、高速的視覺(jué)傳感。

Zinn Labs基于GenX320開(kāi)發(fā)的眼動(dòng)追蹤系統(tǒng)

GenX320的優(yōu)勢(shì)包括：

- 具有靈活數(shù)據(jù)格式的低延遲微秒級(jí)分辨率事件時(shí)間戳。

- 片上智能電源管理模式可將功耗降至36 μW，并支持智能喚醒事件，還提供深度睡眠和待機(jī)模式。

- 易于與標(biāo)準(zhǔn)SoC集成/連接，具有多個(gè)集成事件數(shù)據(jù)預(yù)處理、過(guò)濾和格式化功能，可最大限度地減少外部處理需求。

- MIPI或CPI數(shù)據(jù)輸出接口為嵌入式處理平臺(tái)提供低延遲連接，包括低功耗微控制器和現(xiàn)代神經(jīng)形態(tài)處理器架構(gòu)。

- AI-ready：片上直方圖輸出兼容多種AI加速器。

- 得益于事件傳感器固有的稀疏無(wú)幀事件數(shù)據(jù)和靜態(tài)場(chǎng)景去除，實(shí)現(xiàn)了傳感器端隱私保護(hù)。

- 與Prophesee Metavision Intelligence原生兼容，這是一款最全面、免費(fèi)、基于事件的視覺(jué)軟件套件，已被擁有10000多名用戶的快速增長(zhǎng)的社區(qū)使用。

Prophesee首席執(zhí)行官、聯(lián)合創(chuàng)始人Luca Verre表示：“低功耗Edge AI市場(chǎng)具有廣泛的應(yīng)用，事件傳感器的功率效率和性能特性完美契合。我們基于在其他應(yīng)用領(lǐng)域取得的商業(yè)成功，開(kāi)發(fā)了這款新的基于事件的Metavision傳感器，以滿足邊緣系統(tǒng)開(kāi)發(fā)人員的需求，該傳感器易于面向多種應(yīng)用集成、配置并優(yōu)化，包括運(yùn)動(dòng)和物體檢測(cè)、存在感知、手勢(shì)識(shí)別、眼動(dòng)跟蹤等高增長(zhǎng)領(lǐng)域極具吸引力的用例?！?/p>

重點(diǎn)應(yīng)用

- 在AR/VR/XR設(shè)備中實(shí)現(xiàn)無(wú)縫交互的高速眼動(dòng)追蹤；

- 消費(fèi)類設(shè)備（電視、筆記本電腦、游戲機(jī)、智能家電和設(shè)備、智能顯示器等）中的低延遲免觸摸人機(jī)界面；

- 物聯(lián)網(wǎng)攝像頭和其它設(shè)備中的智能存在檢測(cè)和人員計(jì)數(shù)；

- 超低功耗“永久在線”區(qū)域監(jiān)控系統(tǒng)；

- 家庭和醫(yī)療機(jī)構(gòu)中的跌倒檢測(cè)攝像頭。

供貨情況

GenX320已可從Prophesee及其銷售合作伙伴處購(gòu)買(mǎi)。GenX320提供一系列易于探索和優(yōu)化的開(kāi)發(fā)工具支持，包括含板載芯片（COB）GenX320模塊或緊湊型光學(xué)模塊的綜合評(píng)估套件。此外，Prophesee還提供一系列適配器套件，可以無(wú)縫連接到各種嵌入式平臺(tái)，例如STM32 MCU，從而加快客戶產(chǎn)品上市時(shí)間。

GenX320裸片及評(píng)估套件

Xperi公司首席技術(shù)官Petronel Bigioi評(píng)價(jià)稱：“當(dāng)我們的產(chǎn)品，如駕駛員監(jiān)控解決方案（DMS）和電視服務(wù)等，應(yīng)用基于視覺(jué)的技術(shù)時(shí)，隱私仍然是消費(fèi)者最關(guān)心的問(wèn)題之一。Prophesee基于事件的Metavision技術(shù)使我們能夠在不需要對(duì)場(chǎng)景進(jìn)行明晰視覺(jué)呈現(xiàn)的情況下理解場(chǎng)景，從而將我們的‘設(shè)計(jì)隱私’原則提升到更安全的水平。通過(guò)僅捕捉每個(gè)像素的變化，而非傳統(tǒng)基于幀的成像傳感器那樣捕捉整個(gè)場(chǎng)景，我們的算法可以在無(wú)需詳細(xì)呈現(xiàn)的情況下獲得感知場(chǎng)景中內(nèi)容的信息。我們開(kāi)發(fā)了一個(gè)概念驗(yàn)證演示，證明使用神經(jīng)形態(tài)傳感器完全可以實(shí)現(xiàn)DMS。使用1MP神經(jīng)形態(tài)傳感器，我們可以推斷出接近基于主動(dòng)近紅外照明2MP視覺(jué)傳感解決方案的性能。展望未來(lái)，我們將重點(diǎn)關(guān)注GenX320神經(jīng)形態(tài)傳感器，該傳感器可用于對(duì)隱私敏感的智能設(shè)備，以改善用戶體驗(yàn)?！?/p>

Xperi公司基于GenX320開(kāi)發(fā)的駕駛員監(jiān)控解決方案（DMS）

關(guān)于普諾飛思（Prophesee）

Prophesee是全球最先進(jìn)神經(jīng)形態(tài)視覺(jué)系統(tǒng)的發(fā)明者，開(kāi)發(fā)了一種突破性的基于事件的機(jī)器視覺(jué)方案。這種新興的視覺(jué)技術(shù)可以顯著降低功耗、延遲和數(shù)據(jù)處理要求，并揭示迄今為止傳統(tǒng)基于幀的傳感器所看不到的內(nèi)容。Prophesee獲得專利的Metavision傳感器和算法模擬了人眼和大腦的工作方式，極大地提高了自動(dòng)駕駛汽車、工業(yè)自動(dòng)化、物聯(lián)網(wǎng)、移動(dòng)和AR/VR等領(lǐng)域的效率。Prophesee總部位于巴黎，并在格勒諾布爾、上海、東京和硅谷設(shè)有辦事處。

Prophesee由100多名富有遠(yuǎn)見(jiàn)的工程師組成的團(tuán)隊(duì)推動(dòng)，擁有50多項(xiàng)國(guó)際專利，并得到了領(lǐng)先的國(guó)際股權(quán)和企業(yè)投資者的支持，包括360 Capital Partners、歐洲投資銀行、iBionext、Inno Chip、英特爾資本、雷諾集團(tuán)、博世創(chuàng)投、創(chuàng)新工場(chǎng)、Supernova Invest和小米。