本文系統(tǒng)設(shè)計由開發(fā)者針對目前的一些上肢肢體不健全、自主進食有困難的特殊群體，所提出的一款輔助進食的服務(wù)型桌面機械手控制系統(tǒng)，以語音、機器視覺等傳感器技術(shù)為機器人提供人機交互的接口以及系統(tǒng)的反饋接口，使用物聯(lián)網(wǎng)技術(shù)使機器人能夠通過網(wǎng)絡(luò)與用戶進行數(shù)據(jù)交互，最終實現(xiàn)機械手能夠按照預(yù)期輔助上身有缺陷的人群完成輔助喂食的一系列功能。 1系統(tǒng)功能實現(xiàn)針對目前家庭中服侍老人和特殊人群的要求，設(shè)計的輔助進食機械手系統(tǒng)，主要功能是通過語音的提示，指示機械手完成特定的動作，動作分為喂食 A、B 或 C 三類食物。當機械手收到正確有效的語音指令后，機器臂會取對應(yīng)食物儲存器中的食物，并通過搭載的攝像頭會尋找人臉的目標位置，在檢測到人臉并且等待人主動進食的過程中使用PID控制完成人臉的動態(tài)追隨，直到人主動進食動作完成或者新的進食語音指令觸發(fā)。機械手的主要工作流程是在第一次檢測到人臉以后會將關(guān)節(jié)坐標記錄作為下次喂食的終點坐標，同時進食動作的完成標志是機器人攝像頭檢測到人嘴張開動作的發(fā)生標記一次進食動作完成，如果沒有新的語音指令中斷發(fā)生，機械手繼續(xù)下一輪的喂食動作。2系統(tǒng)整體硬件設(shè)計在整個輔助進食機械手控制系統(tǒng)中，硬件部分包含電源、通信、圖像采集和處理、存儲、語音輸入、脈沖輸出和網(wǎng)絡(luò)通信模塊，輔助進食機械手硬件系統(tǒng)框圖如下所示。由硬件系統(tǒng)框圖可以看出整個系統(tǒng)包含了人機交互單元(語音輸入模塊也是系統(tǒng)的輸入單元)? 、基于 STM32F427 圖像處理單元(用于圖像采集和處理、數(shù)據(jù)存儲以及通訊)? 、基于 STM32F103 運動控制單元(路徑規(guī)劃、伺服舵機控制以及通信)和桌面機械手平臺，當然作為一款服務(wù)機器人在物聯(lián)網(wǎng)(IOT)時代必然會包括一些家庭環(huán)境信息，這樣我們可以通過網(wǎng)絡(luò)來實時查看家庭環(huán)境狀態(tài)，本文提供的是機械手的末端姿態(tài)信息、當前環(huán)境的溫度和光照強度信息。硬件模塊設(shè)計◆主控芯片：選擇 Cortex-M3 內(nèi)核STM32F103ZET6 作為主控制器芯片，集成有豐富的外設(shè)資源，其架構(gòu)圖如下所示。◆電源模塊 ：本設(shè)計的電源系統(tǒng)是采用 DC-DC（直流轉(zhuǎn)直流）方式，外部電源輸入可接受 6-24V之間的直流電源，通過電壓轉(zhuǎn)換芯片 MP2359 實現(xiàn) 5 伏電壓輸出。◆語音模塊：選用的是支持非特定人聲語音識別芯片 LD3320A，實現(xiàn)正確識別出候選語音后能夠產(chǎn)生中斷請求。◆攝像頭模塊：使用的是攝像頭模塊是 OV7725 搭載 STM32F427 處理器的機器視覺庫 OpenMV 。◆電機驅(qū)動模塊：采用數(shù)字舵機 TBS2701，就能夠滿足輔助進食機械手所需精度以及扭矩。◆WiFi 網(wǎng)絡(luò)模塊 ：通過選用ESP8266WiFi模塊，內(nèi)嵌 TCP/IP 協(xié)議，能夠完成 WIFI 數(shù)據(jù)和串口之間的交換，實現(xiàn)服務(wù)機器人與遠程的客戶端進行信息交互。3系統(tǒng)的物聯(lián)網(wǎng)軟件實現(xiàn) 本文的輔助進食機械手借助 WiFi 網(wǎng)絡(luò)連接云端服務(wù)器，實現(xiàn)的功能是完成自身控制器的溫度監(jiān)控、機器人姿態(tài)角的上報、以及家庭工作環(huán)境的溫度和光照強度信息實時上報遠程客戶端，能夠?qū)崟r為用戶提供所需要的家庭環(huán)境信息。1、服務(wù)機器人接入機智云方案 機智云主要為用個人開發(fā)者和企業(yè)提供智能硬件開發(fā)和云服務(wù)平臺，連入物聯(lián)網(wǎng)無線WiFi網(wǎng)絡(luò)是一種非常便捷的選擇。本文服務(wù)機器人和機智云的接入方案是先在設(shè)備端（也就是機器人端連接WiFi通信模塊）嵌入WiFi模塊，然后設(shè)備通過路由器聯(lián)網(wǎng)后與機智云進行通信，而在另一端手機應(yīng)用 APP集成機智云提供的 SDK(應(yīng)用 APP 是在機智云協(xié)議的框架下開發(fā)完成，具有特定產(chǎn)品密碼類似于 ID 號，而且遵從機智云協(xié)議就能連入機智云平臺)也能連入機智云，這樣機智云就能為應(yīng)用端和設(shè)備端搭建了網(wǎng)絡(luò)通信橋梁。服務(wù)機器人和機智云接入方案，如圖所示。 2、機械手傳感器云端數(shù)據(jù)點創(chuàng)建 服務(wù)機器人在用戶遠程信息交互時，需要知道機器人的工作狀態(tài)，其中做主要的是控制器是否工作正常，通過采集 STM32 芯片內(nèi)部的溫度以及通過傳感器 （MPU6050）采集機器人末端姿態(tài)信息了解機器人的姿態(tài)信息。同時用戶還可以通過機器人上面的溫度傳感器（DS18B20）采集的信息了解家庭環(huán)境的室溫信息，通過光照強度傳感器的采集信息了解居室光強信息，也能支持擴展更多的物聯(lián)網(wǎng)功能。文中模擬了控制兩個 LED 燈的開關(guān)。下圖是在機智云上創(chuàng)建的產(chǎn)品傳感器數(shù)據(jù)點的部分截圖。 3、機智云生成的產(chǎn)品代碼與硬件開發(fā) ◆ 機智云平臺開發(fā)產(chǎn)品的流程：①新建一個產(chǎn)品，然后新建產(chǎn)品相關(guān)的數(shù)據(jù)點信息，如機器人的傳感器信息多是從設(shè)備上采集是一種只讀類型的數(shù)值信息，而控制 LED 燈的數(shù)據(jù)點數(shù)據(jù)屬于可寫的布爾(BOOL)類型的信息，不僅需要從設(shè)備上讀取，而且還需要應(yīng)用端(APP)通過機智云能夠修改。②在完成數(shù)據(jù)點創(chuàng)建信息后，根據(jù) MCU 硬件平臺生成對應(yīng)的包含機智云協(xié)議和產(chǎn)品數(shù)據(jù)點信息的代碼包，接下來就是代碼移植和設(shè)備硬件開發(fā)工作，最后需要做的就是 APP 端聯(lián)合調(diào)試過程。具體的開發(fā)流程如圖所示。 ③?在生成代碼之前可以通過虛擬設(shè)備完成在線調(diào)試功能，比如手機端端打開 LED0 和LED1 云端會更新狀態(tài)為 BOOL 值 1，如下所示。對于可寫類型的數(shù)據(jù)點測試可以云端寫入，APP 端更新。◆?對于整個機智云移植流程以及硬件驅(qū)動的開發(fā)在這里以流程圖的形式給出，詳細步驟如下： 步驟1：? 移植 FreeRTOS 系統(tǒng)內(nèi)核 步驟2：? 為機智云協(xié)議提供 1 毫秒(MS)時基 步驟3：? 提供 WIFI 模塊的通信接口，數(shù)據(jù)收發(fā)接口，這里是串口，并且封裝機智云協(xié)議的數(shù)據(jù)接收和發(fā)送函數(shù) 步驟4：添加設(shè)備傳感器驅(qū)動以及機智云的軟復(fù)位程序 步驟5：創(chuàng)建?FreeRTOS?機智云任務(wù)(Gizwits_task())，主要包括機智云協(xié)議連接模式設(shè)置以及復(fù)位操作和傳感器端的上行數(shù)據(jù)處理。 在完成整個開發(fā)以后就可以在遠程 APP 端控制 LED 燈的點亮和熄滅以及實時查看服務(wù)機器人的工作狀態(tài)，獲悉機器人工作點的環(huán)境信息了。如圖所示就是手機 APP端顯示的機器人的實時工作狀態(tài)。4系統(tǒng)總結(jié)整個輔助進食機械手系統(tǒng)，針對服務(wù)機器人的聯(lián)網(wǎng)信息交互給出解決的方案，移植了物聯(lián)網(wǎng)平臺的機智云協(xié)議，物聯(lián)網(wǎng)的嵌入不僅使遠程的交互提供了可能，同時使輔助進食機械手的功能變得更加完善，成為物聯(lián)網(wǎng)機器人。機械手實物圖：輔助進食機械手取食運作過程：