撰文/高小榕（清華大學(xué)生物醫(yī)學(xué)工程系教授、博士生導(dǎo)師、中國(guó)生物醫(yī)學(xué)工程學(xué)會(huì)醫(yī)學(xué)神經(jīng)工程分會(huì)候任主委、北京地區(qū)"廣受關(guān)注學(xué)術(shù)論文報(bào)告會(huì)"生物醫(yī)學(xué)學(xué)科報(bào)告人）

電影《流浪地球》中，通過控制機(jī)器人外骨骼，救援隊(duì)在冰原中拖動(dòng)火石、救助墜落的人員、最后協(xié)力推動(dòng)"頂針"，賺足了觀眾的眼球。這在現(xiàn)實(shí)中可以實(shí)現(xiàn)嗎？我們真的可以如電影中一樣，隨心所欲地操控沉重的機(jī)械戰(zhàn)甲嗎？當(dāng)前，基于肌電的人機(jī)交互技術(shù)為我們提供了可能。

肌電技術(shù)：可識(shí)別每一個(gè)動(dòng)作

骨骼肌肉電信號(hào)，簡(jiǎn)稱肌電，是一種伴隨肌肉收縮運(yùn)動(dòng)，由肌肉細(xì)胞和相關(guān)神經(jīng)元電活動(dòng)疊加產(chǎn)生的信號(hào)。肌電信號(hào)早先主要被應(yīng)用在運(yùn)動(dòng)相關(guān)的疾病診斷和康復(fù)訓(xùn)練等領(lǐng)域中。由于在目標(biāo)肌肉群的皮膚上放置電極即可采集到表面肌電信號(hào)，對(duì)人體沒有任何損害，近年來，肌電這項(xiàng)技術(shù)也開始為普通人群提供服務(wù)。

肌電的產(chǎn)生與肌肉的活動(dòng)息息相關(guān)。不同的動(dòng)作伴隨著不同的肌肉群收縮模式，也對(duì)應(yīng)著不同的肌電響應(yīng)情況，因此，肌電常被用于進(jìn)行人體活動(dòng)狀態(tài)的解讀。

目前，肌電已經(jīng)被證明可以用來識(shí)別諸如握拳、打響指和抬手等多個(gè)手勢(shì)，以及前進(jìn)、后退和轉(zhuǎn)向等多種步態(tài)。此外，由于動(dòng)作的產(chǎn)生也需要肌肉活動(dòng)，肌電不僅可以識(shí)別已經(jīng)發(fā)生的動(dòng)作，還可以對(duì)將要進(jìn)行的動(dòng)作進(jìn)行預(yù)測(cè)。由于肌電在動(dòng)作識(shí)別方面的潛力，其在人機(jī)交互中的應(yīng)用開始逐步受到關(guān)注。

實(shí)際上，當(dāng)前市面上已經(jīng)有多種較為成熟的動(dòng)作識(shí)別解決方案，比較著名的有Kinect 和Leap Motion等。但是，這些方案往往都是基于計(jì)算機(jī)視覺實(shí)現(xiàn)，需要通過攝像頭拍攝到人的活動(dòng)，根據(jù)圖像分割技術(shù)，提取關(guān)鍵的骨骼節(jié)點(diǎn)，識(shí)別出當(dāng)前對(duì)應(yīng)的動(dòng)作。正因?yàn)槠湓砣绱?，這些方案對(duì)于環(huán)境光線，遮擋物和離攝像頭的距離都有一定的要求，因而也限制了應(yīng)用場(chǎng)景和人的活動(dòng)范圍?；诩‰姷膭?dòng)作識(shí)別只需要在胳膊或者小腿等位置貼上電極，不再需要布置攝像頭等其它外部設(shè)備，就可以實(shí)現(xiàn)各種場(chǎng)景下的動(dòng)作識(shí)別，相較而言，就要靈活得多。

▲Leap Motion方案是基于計(jì)算機(jī)視覺實(shí)現(xiàn)的（圖片來源/LeapMotion.com）

人機(jī)交互：多個(gè)場(chǎng)景應(yīng)用廣泛

正因?yàn)槠潇`活性，基于肌電的動(dòng)作識(shí)別在多種人機(jī)交互場(chǎng)景中都有應(yīng)用的可能。

例如，航空航天、深海作業(yè)和災(zāi)害現(xiàn)場(chǎng)搜救等條件嚴(yán)苛充滿風(fēng)險(xiǎn)的地方往往需要遠(yuǎn)程控制機(jī)器人進(jìn)行協(xié)助。而利用肌電進(jìn)行機(jī)器人控制只需要使用者作出相應(yīng)的動(dòng)作即可，這讓整個(gè)操作流程變得非常便捷，操作員更有身臨其境的感覺，對(duì)突然出現(xiàn)的危機(jī)情況也可以更快地進(jìn)行反應(yīng)。此外，這種基于肌電的使用者動(dòng)作同步模擬還有望被應(yīng)用在遠(yuǎn)程手術(shù)中。也許在未來的一天，通過分析肌電實(shí)時(shí)提取大夫的手部動(dòng)作，我們可以讓身處北京的大夫控制手術(shù)機(jī)器人治療深圳的患者，讓頂尖的醫(yī)生能幫助到更多的人。

另外，基于肌電的動(dòng)作識(shí)別還可以被應(yīng)用于機(jī)器人外骨骼的控制。這種技術(shù)既可以打造中強(qiáng)力的機(jī)械戰(zhàn)士，也能在日常生活中發(fā)揮作用，例如搬運(yùn)重物，在火災(zāi)現(xiàn)場(chǎng)救出被困在高層的人們，等等。除此之外，該技術(shù)還可以幫助肢體缺損的人重獲活動(dòng)能力。例如，已經(jīng)有基于肌電的解決方案，幫助因事故完全切除手掌的鋼琴愛好者，控制機(jī)械手成功彈起了自己心愛的樂曲。

肌電在娛樂行業(yè)也有相應(yīng)的前景，除了控制小車、無人機(jī)等小游戲之外，基于肌電的動(dòng)作識(shí)別也可以作為虛擬現(xiàn)實(shí)和增強(qiáng)現(xiàn)實(shí)游戲的一個(gè)輸入維度，只需要如真實(shí)世界中作出相應(yīng)的動(dòng)作，玩家就可以在游戲世界中走動(dòng)，拾取物品或者進(jìn)行一次攻擊，這種交互模式相較于現(xiàn)有的控制手柄會(huì)帶來更高的控制感和沉浸感，讓游戲體驗(yàn)提升。同時(shí)，基于肌電的動(dòng)作識(shí)別還可以用于智能家居的控制，想象一下這樣的場(chǎng)景：進(jìn)門之后打一個(gè)響指，家中的燈光、空調(diào)和音樂就相繼打開，迎接主人的回歸。

▲基于小腿表面肌電的智能移動(dòng)機(jī)器人控制系統(tǒng)示意圖。通過對(duì)采集的肌電信號(hào)進(jìn)行比較分析, 選取了動(dòng)作段與靜息區(qū)別較為明顯的CH1等四通道信號(hào)作為后 續(xù)研究信號(hào)源。左上圖是電極放置的位置；右上圖是實(shí)際的控制場(chǎng)景；左下圖是機(jī)器人的示意圖；右下圖是步態(tài)識(shí)別的準(zhǔn)確率（供圖/ 高小榕）

人機(jī)融合："雙向"交互營(yíng)造沉浸式體驗(yàn)

基于肌電的人機(jī)交互在國(guó)內(nèi)外都受到廣泛的關(guān)注，也是研究的熱門話題之一。我和清華大學(xué)神經(jīng)工程研究室徐超立一起，提出了一種新穎的"基于小腿表面肌電信號(hào)的智能移動(dòng)機(jī)器人控制方法"。通過采集單腿的小腿肌電信號(hào)，并將用戶步態(tài)動(dòng)作的識(shí)別結(jié)果實(shí)時(shí)轉(zhuǎn)化為對(duì)機(jī)器人運(yùn)動(dòng)控制的指令，該系統(tǒng)實(shí)現(xiàn)了人與智能移動(dòng)機(jī)器人的實(shí)時(shí)協(xié)同交互。該系統(tǒng)采集方法簡(jiǎn)單，實(shí)時(shí)性和準(zhǔn)確率都很高，于2016年發(fā)表在《中國(guó)生物醫(yī)學(xué)工程雜志》上，引起學(xué)術(shù)界好評(píng)，在2019年被評(píng)為"北京地區(qū)廣受關(guān)注學(xué)術(shù)論文"。

那么在下一階段中，肌電在人機(jī)交互領(lǐng)域還有哪些提升的方向？一種可能性是實(shí)現(xiàn)"雙向"的交互。目前常用的，把肌電中信息解碼后用于控制設(shè)備只是一種從人到機(jī)的單向信息傳遞，實(shí)際上，在與觸覺反饋和肌肉電刺激等技術(shù)結(jié)合之后，我們還可以將反饋信息再直接輸入給人。例如，通過肌電控制化身在虛擬現(xiàn)實(shí)場(chǎng)景中鞠一捧水的同時(shí)，如果具有反向的輸入通道，我們還可以感覺到水的重量和流動(dòng)感。這種雙向的交互可以進(jìn)一步地提高真實(shí)感，從而實(shí)現(xiàn)人機(jī)交互到人機(jī)融合的跨越。

由于肌電采集相對(duì)簡(jiǎn)潔，蘊(yùn)含信息豐富，在動(dòng)作識(shí)別中具有很大的潛力。但也需要注意到現(xiàn)有技術(shù)仍存在著運(yùn)動(dòng)噪聲干擾判別、動(dòng)作識(shí)別效果受個(gè)體差異影響，單次使用時(shí)間長(zhǎng)性能降低等問題。我們期待在研究者的不斷努力下，肌電可以在人機(jī)交互中發(fā)揮更大的作用，為廣大用戶群體帶來更自然、更便利的人機(jī)交互解決方案。