描述

什么是 TinyML？

想象一下，想要感知微控制器上何時發(fā)生某種手勢。通常，這將通過從傳感器收集訓(xùn)練數(shù)據(jù)、對其進行標(biāo)記、然后使用腳本來訓(xùn)練模型然后部署它來完成。此工作流程需要大量時間，并且對初學(xué)者來說可能非常艱巨。

TinyML 是 Edge imp 提供的一項服務(wù)，只需將微控制器連接到他們的服務(wù)，單擊一個按鈕，然后在他們的服務(wù)器完成繁重的工作后部署它，就可以輕松創(chuàng)建這些模型。他們的拖放界面使添加更多傳感器或?qū)W習(xí)功能變得輕而易舉。

潛在應(yīng)用

如前所述，Edge Impulse 的 TinyML 非常適合快速創(chuàng)建依賴大量數(shù)據(jù)來檢測和/或預(yù)測事件何時發(fā)生或正在發(fā)生的項目。一個很好的例子是熱詞識別，可以設(shè)置一個設(shè)備來監(jiān)聽一個特定的短語，然后根據(jù)它執(zhí)行一個動作，比如“打開百葉窗”或“開燈”。該平臺的另一個重要用途是運動識別，例如一種計算步數(shù)或檢查當(dāng)前是否正在使用物品的方法。

設(shè)置帳戶

首先，首先創(chuàng)建一個帳戶。

?

輸入您的信息并驗證您的電子郵件后，您將看到一個入門頁面。這將引導(dǎo)您完成連接設(shè)備、收集數(shù)據(jù)和最終部署模型的過程。我將我的第一個項目命名為 PhoneTest-1，但它可以是任何你喜歡的。

?

連接手機

TinyML 支持許多設(shè)備，包括 ESP32、許多 ST ARM Cortex-M3 板和幾個支持 Arduino WiFi 的套件。然而，許多相同的任務(wù)只需通過網(wǎng)絡(luò)瀏覽器使用智能手機即可完成，因為它包含麥克風(fēng)和加速度計。要連接您的手機，只需點擊打開二維碼的“使用您的手機”按鈕。

?

?

?

?

1 / 2

?

掃描后，您將被帶到他們的網(wǎng)站并通過 API 密鑰自動連接到他們的 API。確保在本指南的其余部分保持手機開機并打開瀏覽器窗口。

收集數(shù)據(jù)

現(xiàn)在是時候真正深入研究并創(chuàng)建模型了。但首先，必須有數(shù)據(jù)來訓(xùn)練它。確保您將手機放在手邊，因為您將使用其傳感器來捕獲數(shù)據(jù)。首先，轉(zhuǎn)到數(shù)據(jù)采集選項卡并確保選擇了您的手機。選擇加速度計傳感器和頻率，然后單擊“開始采樣”。移動完手機后，您可以在圖表中查看收集到的數(shù)據(jù)。

?

?

?

?

1 / 2

?

訓(xùn)練模型

由于您記錄了一些數(shù)據(jù)，是時候從中訓(xùn)練模型了。繼續(xù)并導(dǎo)航到“創(chuàng)建脈沖”頁面并選擇推薦的頻譜分析處理塊和 Keras 神經(jīng)網(wǎng)絡(luò)學(xué)習(xí)塊。然后繼續(xù)前進并保存沖動。

?

接下來，設(shè)置數(shù)據(jù)的縮放、過濾和 FFT 設(shè)置。這些將控制您的數(shù)據(jù)在發(fā)送到 NN 之前如何進行預(yù)處理。之后，查看并生成特征。

?

?

?

?

1 / 3

?

在 NN 設(shè)置頁面上，我決定將默認(rèn)置信度閾值從 80% 更改為 91%。訓(xùn)練模型后，我能夠查看模型提出的圖表。然后我轉(zhuǎn)到“分類”頁面，從手機中收集了更多數(shù)據(jù)，并查看了模型能夠檢測到的內(nèi)容。

?

?

?

?

1 / 3

?

部署

為了部署模型，我將模型導(dǎo)出為 WebASM 文件，然后將其解壓縮。然后我創(chuàng)建了一個名為的新 js 文件run-impulse.js并將其放入與模型相同的文件夾中（但該文件附加到此項目頁面）。為了運行它，我在命令提示符中輸入了節(jié)點命令run-impulse.js，然后將“原始特征”數(shù)組粘貼在引號中作為node命令的第二個參數(shù)。

?

?

?

?

1 / 3 ? run-impulse.js 源代碼

?

最后的想法

我認(rèn)為 TinyML 是一種輕松收集數(shù)據(jù)并將其處理成模型的好方法，這些模型可以快速部署到“邊緣”的微控制器上，而無需互聯(lián)網(wǎng)連接或強大的處理器，這可以為許多項目帶來機器學(xué)習(xí)功能并實現(xiàn)驚人的要建造的創(chuàng)作。