高光譜成像技術(shù)因其能夠捕獲物體在不同波長(zhǎng)下的光譜信息。廣泛應(yīng)用于農(nóng)業(yè)、環(huán)境監(jiān)測(cè)、工業(yè)檢測(cè)等領(lǐng)域。近年來(lái)，隨著嵌入式平臺(tái)（如NVIDIA Jetson和樹(shù)莓派）性能的不斷提升，高光譜相機(jī)的嵌入式部署成為可能。

系統(tǒng)組成

在嵌入式平臺(tái)上部署高光譜相機(jī)，面臨著諸多技術(shù)難題。如高光譜相機(jī)如何和嵌入式設(shè)備通信，產(chǎn)生的海量數(shù)據(jù)如何處理，處理結(jié)果如何發(fā)送給控制器等，都限制了光譜相機(jī)在嵌入式設(shè)備上的應(yīng)用。同時(shí)不同的嵌入式平臺(tái)各自擁有獨(dú)特的硬件架構(gòu)和數(shù)據(jù)處理模式，如何讓高光譜相機(jī)與各類平臺(tái)完美適配也成為需要考慮的問(wèn)題。為解決該問(wèn)題，友思特eBUS軟件，為嵌入式分選和檢測(cè)成像平臺(tái)搭建提出專屬解決方案。

如圖為友思特自定義嵌入式分選和檢測(cè)成像平臺(tái)。自定義的分選系統(tǒng)由下面及部分組成：

√ 工業(yè)高光譜相機(jī)

√ 實(shí)時(shí)數(shù)據(jù)采集（如友思特eBUS Rx方案）

√ 高性能處理平臺(tái)（如Nvidia Jetson系列、RK3588系列、樹(shù)莓派系列）

√ 實(shí)時(shí)通信協(xié)議（如友思特eBUS Edge軟件傳輸方案）

**部分資料來(lái)源于網(wǎng)絡(luò)（各部分組成均可由用戶自由組合）

（1） eBUS Rx嵌入式平臺(tái)數(shù)據(jù)采集

eBUS Rx是一種將任何傳感器設(shè)備接入嵌入式平臺(tái)的軟件，任何傳感器、物聯(lián)網(wǎng)設(shè)備，不需要ARM平臺(tái)的驅(qū)動(dòng)，通過(guò)eBUS Rx即可接入嵌入式平臺(tái)。

通過(guò)eBUS Rx，原本僅支持win系統(tǒng)的設(shè)備，可以成功部署在ARM上，實(shí)現(xiàn)低功耗、便捷式、小型化的數(shù)據(jù)傳輸和控制。

（2） eBUS Edge實(shí)現(xiàn)多平臺(tái)自定義GigE Vision協(xié)議打包

eBUS Edge是一個(gè)軟件平臺(tái)，無(wú)需任何額外的硬件，即可將相機(jī)、成像解決方案以及嵌入式和物聯(lián)網(wǎng)設(shè)備轉(zhuǎn)換為完全符合的GigE Vision、GenICam設(shè)備。如嵌入式平臺(tái)上進(jìn)行AI處理后的結(jié)果，需要進(jìn)一步傳給后端控制器和其他系統(tǒng)使用，使用ebus edge，實(shí)現(xiàn)處理后的坐標(biāo)或圖像數(shù)據(jù)進(jìn)行協(xié)議打包，發(fā)送。

主要特征

1. 保持原有的硬件連接

eBUS Rx基于原有的相機(jī)接口（如USB 3.0或以太網(wǎng)），能夠?qū)⒏吖庾V相機(jī)的輸出信號(hào)轉(zhuǎn)換為嵌入式平臺(tái)可識(shí)別的格式。這種即插即用的設(shè)計(jì)大大降低了硬件集成的復(fù)雜性。

2. 高效數(shù)據(jù)傳輸

高光譜相機(jī)生成的數(shù)據(jù)量巨大，eBUS適配器通過(guò)優(yōu)化數(shù)據(jù)傳輸協(xié)議，將CPU使用率至少降低20%以上，確保數(shù)據(jù)能夠以高帶寬、低延遲的方式傳輸?shù)角度胧狡脚_(tái)。這對(duì)于實(shí)時(shí)處理高光譜數(shù)據(jù)至關(guān)重要。

3. 兼容性強(qiáng)

eBUS軟件不僅支持與高光譜相機(jī)的直接連接，還能與多種嵌入式平臺(tái)兼容。

①NVIDIA Jetson：Jetson系列設(shè)備通過(guò)其強(qiáng)大的GPU計(jì)算能力，能夠高效處理高光譜相機(jī)采集的數(shù)據(jù)。

②Raspberry Pi：樹(shù)莓派則憑借其較低的功耗和高性價(jià)比，成為了許多小型、低功耗應(yīng)用的理想選擇。

③瑞芯微RK3588：同時(shí)，目前最新版本的ebus已支持國(guó)產(chǎn)瑞芯微RK3588。

應(yīng)用場(chǎng)景

1農(nóng)業(yè)生產(chǎn)

在現(xiàn)代化農(nóng)業(yè)生產(chǎn)中，通過(guò)安裝在農(nóng)田、溫室等環(huán)境中的攝像頭和傳感器，實(shí)時(shí)監(jiān)測(cè)農(nóng)作物的生長(zhǎng)狀況、土壤濕度、氣象條件等信息，為精準(zhǔn)農(nóng)業(yè)提供數(shù)據(jù)支持。eBUS 收發(fā)解決方案可以整合來(lái)自不同類型傳感器（如可見(jiàn)光攝像頭、紅外熱成像儀、土壤濕度傳感器等）的數(shù)據(jù)，實(shí)現(xiàn)全方位的農(nóng)業(yè)環(huán)境監(jiān)測(cè)。

2工業(yè)生產(chǎn)

在現(xiàn)代化工業(yè)生產(chǎn)中，通過(guò)部署在生產(chǎn)線上的高精度攝像頭和傳感器（如激光測(cè)距儀、3D結(jié)構(gòu)光模組），實(shí)時(shí)監(jiān)測(cè)零部件的加工精度、表面缺陷及裝配狀態(tài)，為智能制造提供數(shù)據(jù)支持。嵌入式視覺(jué)系統(tǒng)（如Jetson AGX Orin）結(jié)合eBUS協(xié)議可以整合來(lái)自不同工位的多源數(shù)據(jù)（如可見(jiàn)光檢測(cè)、紅外熱成像、振動(dòng)傳感器等），實(shí)現(xiàn)全流程的質(zhì)量控制和自動(dòng)化優(yōu)化。

3智慧城市交通管理

在智慧城市交通管理中，通過(guò)安裝在路口、收費(fèi)站及車(chē)載終端的多模態(tài)攝像頭（如全局快門(mén)攝像頭、熱成像儀），實(shí)時(shí)監(jiān)測(cè)車(chē)輛流量、車(chē)牌信息及行人行為，為交通調(diào)度和自動(dòng)駕駛提供低延遲的決策依據(jù)。嵌入式平臺(tái)（如NVIDIA Drive）結(jié)合GMSL/MIPI協(xié)議可同步處理多路視頻流（如環(huán)視攝像頭+毫米波雷達(dá)），實(shí)現(xiàn)低延遲的復(fù)雜環(huán)境感知。

4數(shù)字醫(yī)療

在數(shù)字化醫(yī)療場(chǎng)景中，通過(guò)內(nèi)窺鏡、手術(shù)顯微鏡及可穿戴設(shè)備中的微型攝像頭，實(shí)時(shí)采集患者影像數(shù)據(jù)（如組織形態(tài)、血流信號(hào)），為遠(yuǎn)程診斷和機(jī)器人手術(shù)提供高精度視覺(jué)反饋。嵌入式系統(tǒng)通過(guò)傳輸協(xié)議整合多模態(tài)數(shù)據(jù)，實(shí)現(xiàn)術(shù)中實(shí)時(shí)AI輔助。

因此，借助eBUS，開(kāi)發(fā)者能夠輕松將這些設(shè)備與高光譜相機(jī)結(jié)合，開(kāi)展各種嵌入式光譜成像應(yīng)用。解決了數(shù)據(jù)傳輸、接口兼容性等問(wèn)題，并為光譜成像技術(shù)的實(shí)時(shí)應(yīng)用提供了強(qiáng)有力的支持。

友思特產(chǎn)品

eBUS Edge

對(duì)于使用各種先進(jìn)相機(jī)、傳感器和嵌入式平臺(tái)開(kāi)發(fā)成像系統(tǒng)的機(jī)器視覺(jué)設(shè)計(jì)人員來(lái)說(shuō)，eBUS Edge是一種軟件解決方案，通過(guò)將任何設(shè)備轉(zhuǎn)換為符合 GenICam 標(biāo)準(zhǔn)的標(biāo)準(zhǔn)化GigE Vision設(shè)備來(lái)簡(jiǎn)化部署，從而實(shí)現(xiàn)跨設(shè)備的可移植性和互操作性，同時(shí)仍允許第三方處理應(yīng)用程序。

設(shè)計(jì)和部署基于標(biāo)準(zhǔn)的檢測(cè)解決方案，無(wú)需在已經(jīng)很緊湊的系統(tǒng)中添加額外的專用硬件，并輕松地將高級(jí)傳感器和攝像頭添加到現(xiàn)有的檢測(cè)應(yīng)用中，以改進(jìn)機(jī)器視覺(jué)檢測(cè)系統(tǒng)，而不受設(shè)備限制。

通過(guò)將數(shù)據(jù)轉(zhuǎn)換為GigE Vision，最終用戶可以使用現(xiàn)成的圖像處理軟件，并朝著先進(jìn)的工廠自動(dòng)化應(yīng)用發(fā)展。

而GenlCam允許用戶繼續(xù)控制設(shè)備。本地決策可減少帶寬需求，同時(shí)為更復(fù)雜的分析任務(wù)保留集中處理能力。

審核編輯 黃宇