類腦技術(shù)模仿生物腦信息處理的方式，同時也集成了其眾多優(yōu)勢。以超低功耗、超低延遲作為最突出特點，類腦技術(shù)為邊緣計算帶來了全新視野。自成立以來，SynSense時識科技不斷嘗試降低類腦芯片在嵌入式機器視覺及音頻應(yīng)用方面的功耗及延遲性，同時提升精準(zhǔn)度。而在硬件之外，軟件框架同樣作為其中的關(guān)鍵因素，在創(chuàng)新訓(xùn)練脈沖神經(jīng)網(wǎng)絡(luò)方面發(fā)揮著巨大作用。

截至目前，SynSense時識科技已開發(fā)Samna、Sinabs、Rockpool、Tonic四款軟件及工具鏈，且已全部開源。以適用于SynSense時識科技“感算一體”動態(tài)視覺智能SoC Speck及其開發(fā)套件的開源庫Sinabs和工具鏈Samna為例，開發(fā)者可輕松使用片上DVS傳感器并搭建達(dá)9層的脈沖卷積神經(jīng)網(wǎng)絡(luò)。而在Speck部署流水線中，開發(fā)者可使用小于5行代碼，將模型部署至Speck中，從而開啟應(yīng)用原型開發(fā)。

“在SynSense時識科技，我們專注于類腦硬件平臺與軟件棧的良好協(xié)同。作為開源性質(zhì)的工具，其基于行業(yè)標(biāo)準(zhǔn)的機器學(xué)習(xí)庫，同時伴隨高準(zhǔn)確度的硬件模擬器，能夠助力開發(fā)者在Python環(huán)境中方便地進(jìn)行部署測試。”

SynSense時識科技全球研發(fā)副總裁Dylan Muir博士在Speck開發(fā)套件上快速部署

Speck開發(fā)套件基礎(chǔ)使用要求

硬件要求：至少 4GB 物理內(nèi)存、1個USB3.0接口

一個顯示器、擁有集成或獨立顯卡

軟件要求：Ubuntu 18.04/20.04

安裝軟件：Samna，Sinabs

近日，SynSense時識科技發(fā)布全新類腦感知及計算開發(fā)平臺Speck及Xylo-Audio，支持類腦智能研發(fā)及開發(fā)者生態(tài)搭建。以Speck為例，用戶可在SynSense時識科技數(shù)據(jù)集測試工具Tonic、開源庫Sinabs、工具鏈Samna的支持下，快速地對開發(fā)套件進(jìn)行部署啟用?？稍L問我們的官方網(wǎng)站查看相關(guān)軟件。

For data management

Tonic是一款開放型基準(zhǔn)數(shù)據(jù)集測試工具。 作為開源性質(zhì)的Python庫，Tonic提供可公開使用、基于事件的視覺及音頻數(shù)據(jù)集，以及數(shù)據(jù)處理功能。Tonic對PyTorch Vision與audio transform接口完全兼容，可為用戶提供最大的靈活度，不僅支持直接在事件或時間面（time surface）上進(jìn)行處理增強， 同時也支持一系列傳統(tǒng)框架的操作， 例如將稀疏事件和綢密壓縮表達(dá)相互轉(zhuǎn)換。

For simulation

Sinabs是一個基于PyTorch的開源庫，旨在設(shè)計和實現(xiàn)脈沖卷積神經(jīng)網(wǎng)絡(luò)（sCNN）。 Sinabs可以實現(xiàn)與卷積神經(jīng)網(wǎng)絡(luò)等效的脈沖卷積神經(jīng)網(wǎng)絡(luò)。此外，它還支持Sinabs-exodus, Sinabs-dynap cnn等眾多plug-in, 方便用戶調(diào)取最新的脈沖神經(jīng)網(wǎng)絡(luò)設(shè)計和芯片部署效率工具。 ↓

Samna

For host management

Samna 是為SynSense時識科技類腦芯片量身定制的開發(fā)者接口和高性能實時交互工具。Samna核心邏輯全部為C++編寫，對外提供了一套Python接口，在保證了易用性的同時也確保了數(shù)據(jù)處理的實時性。針對事件驅(qū)動設(shè)備數(shù)據(jù)流的特性，Samna集成了一個能夠?qū)崟r多線程處理事件流的數(shù)據(jù)處理系統(tǒng)，允許用戶對輸入輸出芯片的數(shù)據(jù)進(jìn)行自定義處理。同時該數(shù)據(jù)處理系統(tǒng)支持在線編譯器(Just-In-Time Compiler)，允許用戶使用C++編寫數(shù)據(jù)處理算法并實時整合進(jìn)數(shù)據(jù)處理流中。 ↓

通過使用Sinabs和Samna，可更加便捷地將脈沖神經(jīng)網(wǎng)絡(luò)模型部署至Speck開發(fā)板中，從而快速啟用。

“從數(shù)據(jù)預(yù)處理、神經(jīng)網(wǎng)絡(luò)架構(gòu)設(shè)計、網(wǎng)絡(luò)優(yōu)化、片上部署和后期調(diào)試，SynSense的軟件工具鏈為Speck/Xylo系列類腦芯片開發(fā)提供了完整閉合的開發(fā)和應(yīng)用支持。同時，我們有著豐富內(nèi)部和外部的開發(fā)者群體， 不斷對我們的軟件工具鏈優(yōu)化和拓展，” SynSense時識科技高級算法工程師邢雁南博士表示。 SynSense時識科技瑞士團(tuán)隊類腦機器學(xué)習(xí)工程師Gregor Lenz博士道：“通過發(fā)布我們的開發(fā)工具，我們希望對類腦社區(qū)作出來自SynSense時識科技的貢獻(xiàn)，共同探索下一代神經(jīng)網(wǎng)絡(luò)。” 自發(fā)布最新類腦開發(fā)套件以來，SynSense時識科技已收到了來自世界各國研究機構(gòu)、高校及企業(yè)等研發(fā)人員的熱切詢問。我們期望通過提供開發(fā)工具、豐富開發(fā)資源，吸引更多開發(fā)者和愛好者加入類腦領(lǐng)域。接下來，SynSense時識科技工程師團(tuán)隊將圍繞開發(fā)套件使用及脈沖神經(jīng)網(wǎng)絡(luò)訓(xùn)練等多個方面，與開發(fā)者及愛好者展開探討，歡迎持續(xù)關(guān)注。

SPECK類腦智能開發(fā)套件

此次發(fā)售的Speck開發(fā)套件為SynSense時識科技最新款類腦視覺開發(fā)套件，全新升級的Speck SoC集成動態(tài)視覺傳感器/事件相機，大幅度提升了感光性能并降低了噪音，同時，SoC片內(nèi)集成32萬脈沖神經(jīng)元類腦智能處理器，實現(xiàn)超低功耗動態(tài)實時圖像處理。利用SynSense時識科技開源軟件開發(fā)包，可輕松使用片上DVS傳感器并搭建高達(dá)9層的脈沖卷積神經(jīng)網(wǎng)絡(luò)。 Speck開發(fā)套件為SynSense時識科技目前在售的高性能類腦智能視覺開發(fā)平臺，支持實時監(jiān)測、手勢識別、行為檢測、光流、跟隨等多場景復(fù)雜視覺類應(yīng)用模型開發(fā)。

了解更多請詳詢

關(guān)于SynSense時識科技 SynSense時識科技（原名aiCTX）創(chuàng)立于2017年，是全球領(lǐng)先的類腦智能與應(yīng)用解決方案提供商。 SynSense時識科技專注類腦智能的研究與開發(fā)，以蘇黎世大學(xué)和蘇黎世聯(lián)邦理工學(xué)院20+年全球領(lǐng)先的研發(fā)經(jīng)驗和技術(shù)積累為基石，聚焦邊緣計算應(yīng)用場景，提供橫跨感知與計算的類腦智能應(yīng)用與解決方案。 SynSense時識科技率先實現(xiàn)了類腦芯片商業(yè)化應(yīng)用零的突破，為人工智能向認(rèn)知智能發(fā)展，萬物互聯(lián)向萬物智聯(lián)發(fā)展邁出了關(guān)鍵一步。SynSense將和伙伴一起，共同構(gòu)建“端到芯”“物與物”“物與人”萬物智聯(lián)的認(rèn)知生態(tài)，引領(lǐng)全球類腦智能應(yīng)用與發(fā)展，為人類未來美好生活創(chuàng)造福祉。