2023年11月22日，由芯查查主辦的“瑞薩電子嵌入式人工智能技術(shù)及應(yīng)用研討會(huì)”在深圳成功舉辦。

本次線(xiàn)上研討會(huì)主要探討了基于瑞薩MCU/MPU的一系列AI技術(shù)、方案以及應(yīng)用落地案例。瑞薩電子為AIOT開(kāi)發(fā)人員提供了一個(gè)綜合解決方案堆棧，從傳感、連接、計(jì)算到驅(qū)動(dòng)，豐富的產(chǎn)品系列及關(guān)鍵技術(shù)涵蓋IoT的方方面面。為了提升客戶(hù)的產(chǎn)品競(jìng)爭(zhēng)力，瑞薩可客戶(hù)搭建了三座嵌入式人工智能的技術(shù)橋梁：

1語(yǔ)音：主要處理口語(yǔ)與語(yǔ)音類(lèi)的識(shí)別和響應(yīng)；

2實(shí)時(shí)分析：主要處理傳感器數(shù)據(jù)以及傳感器所捕捉到的時(shí)間序列數(shù)據(jù)，經(jīng)過(guò)分析、轉(zhuǎn)換并用于構(gòu)建推理/分類(lèi)引擎；

3視覺(jué)：主要處理攝像頭、機(jī)器視覺(jué)與機(jī)器人視覺(jué)等基于Camera應(yīng)用的視覺(jué)應(yīng)用；

瑞薩將關(guān)鍵技術(shù)與這三大AI/ML支柱與完美結(jié)合，幫助客戶(hù)解決或增強(qiáng)IoT系統(tǒng)的維護(hù)、有效性、責(zé)任、個(gè)性化、服務(wù)、安全、保障等方面的問(wèn)題。

針對(duì)這三大AI/ML支柱，瑞薩提供了豐富友好的軟件工具和開(kāi)發(fā)套件：

點(diǎn)擊查看大圖

基于Reality AI的實(shí)時(shí)分析

解決方案

Reality AI是一個(gè)部署在云上的工業(yè)物聯(lián)網(wǎng)AI平臺(tái)，它利用云計(jì)算平臺(tái)充實(shí)的算力資源，為嵌入式應(yīng)用提供自動(dòng)機(jī)器學(xué)習(xí)和模型生成工具，并智能地分析Sensor數(shù)據(jù)合理性以及優(yōu)化硬件BOM。此外，Reality AI軟件為HVAC垂直應(yīng)用領(lǐng)域開(kāi)發(fā)了完整的解決方案套件，包括硬件、固件、軟件和ML參考設(shè)計(jì)，因此Reality AI不僅僅是一個(gè)軟件工具。

Reality AI基于先進(jìn)信號(hào)處理技術(shù)，可自動(dòng)搜索各種信號(hào)處理轉(zhuǎn)換需要，以創(chuàng)建自定義的優(yōu)化特征轉(zhuǎn)換。Reality AI產(chǎn)品可自動(dòng)生成可視化/可解釋性機(jī)器學(xué)習(xí)模型和硬件設(shè)計(jì)分析，它不是一個(gè)黑匣子。在自動(dòng)分析和探索數(shù)據(jù)特征的過(guò)程中，它將以工程師可以理解的方式，告知Reality AI工具發(fā)現(xiàn)了什么。Reality AI可以生成適用于瑞薩16bit~64bit的所有MCU/MPU產(chǎn)品的AI模型。

點(diǎn)擊查看大圖

Reality AI提供以下工具和解決方案

點(diǎn)擊查看大圖

對(duì)于Reality AI工具，包括多個(gè)功能組件

● AI Explorer：自動(dòng)探索數(shù)據(jù)特征，支持各類(lèi)基于時(shí)間序列的Sensor數(shù)據(jù)，包括震動(dòng)、音頻、電信號(hào)、射頻/雷達(dá)信號(hào)和專(zhuān)用傳感器

● BOM Optimization：使用AI尋找最優(yōu)的成本效益組件，例如傳感器的選擇和組合、傳感器的放置、必要的采樣率等

● Data Readiness：監(jiān)控?cái)?shù)據(jù)收集進(jìn)度和覆蓋計(jì)劃，檢查數(shù)據(jù)質(zhì)量和一致性，自動(dòng)識(shí)別常見(jiàn)問(wèn)題，例如：不一致的格式、空/零文件、截?cái)鄶?shù)據(jù)、不一致的采樣率、不完整的數(shù)據(jù)通道等

● Edge AI/Tiny ML：生成的代碼和模型適用于最小資源的MCU

點(diǎn)擊查看大圖

RealityCheck Motor是Reality AI的另一個(gè)附加工具

● 用于部署機(jī)器學(xué)習(xí)模型到瑞薩電機(jī)控制套件

● 用于電機(jī)驅(qū)動(dòng)系統(tǒng)的預(yù)測(cè)性維護(hù)、異常檢測(cè)和控制反饋

Reality AI還針對(duì)HVAC垂直應(yīng)用推出了完整的解決方案框架

●包括了硬件、固件參考設(shè)計(jì)和一套預(yù)訓(xùn)練的ML模型

●通過(guò)振動(dòng)、溫度和電信號(hào)來(lái)檢測(cè)HVAC設(shè)備的各種情況，以預(yù)測(cè)各種異常、故障和作業(yè)狀況

Reality AI在新能源、家電、工業(yè)控制以及工業(yè)物聯(lián)網(wǎng)獲得了大量項(xiàng)目落地，以下是部分的成功案例：

審核編輯：湯梓紅