量子位 報道 | 公眾號 QbitAI
機器人只能用一張撲克臉、上面兩只空洞的塑膠珠子來面對人類嗎？
不一定，它也可以 沖你微笑 ！
下面這個擁有著 柔軟面部 的「小藍人」，可以 模仿人類的微笑等表情 。
就像這樣：
「尬笑」、「齜牙咧嘴」……一改機器人「冷若冰霜、呆若木雞」的形象。
可一向由金屬或硬塑膠制成的機器人，是如何露出微笑的呢？
由線和電機組成的人造「肌肉」
哥倫比亞大學（Columbia Engineering）創意機器實驗室（Creative Machines Lab）的研究人員一直對機器人與人類之間的互動感興趣。
面部表情 在建立信任方面發揮著巨大作用，隨著機器人已經被越來越多的用於療養院、醫院等與人類緊密合作的地方，相比「冷冰冰」，我們更需要靈敏、有「溫度」的機器人。
於是，研究人員花了五年時間來創造上面這個可以模仿人類表情、叫做 EVA 的機器人。
EVA的機械設計含以下 四個模組 ，如下圖：
A為電機伺服模組（motor servo module ），EVA就是由它驅動，該模組透過底部的樹莓派4控制。「皮膚」透過尼龍繩與10個電機相連，以受到控制作出相應表情。
B為有6個轉動角度的自由度的眼睛模組，與前顱骨分離。
C為RGB攝影機，用於人表情的隨機數據采集。
D為6自由度的頸部模組。
其中，要想在機器人整個頭部設計出一個足夠緊湊的系統以適應人類頭骨的大小，同時仍然具有足夠的功能以產生各種面部表情可不容易。
裏面要塞下電路、傳感器和電機（motor）等各種體積不小的玩意兒。
為此，研究人員決定用 3D 打印 來制造形狀復雜的零件，讓這些零件在EVA 的腦瓜裏無縫地整合在一起。
EVA透過由尼龍繩和電機（cables and motors）組成的 人工「肌肉」 ，拉動臉上的特定點，模仿人類面部皮膚和骨骼上不同部位的42多塊細小肌肉的運動，來表達憤怒、厭惡、恐懼、喜悅、悲傷和驚訝六種基本情緒，甚至更細微的表情。
「有一天，當 EVA 突然給我一個大大的、友好的微笑時，我正忙著自己的事情，我知道這純粹是機械性的，但我發現自己條件反射地回以微笑。」深度學習「閱讀」人類表情，作出反應
上面的機械設計，表明EVA這個機器人 在物理上 具備作出各種表情的能力。那它又是如何自主完成模仿的呢？
下面就來揭開這款機器人的軟件部份。
由於人類面部表情太復雜，預先設定好的規則根本不夠隨機應變，研究人員利用幾個深度學習神經網絡構建了EVA的「大腦」。
這個大腦需掌握 兩種 能力：一是透過「閱讀」人類的臉知道自己要做哪些表情；二是能把這些表情透過控制面部「肌肉」而呈現出來。
為了教EVA認清自己的「臉」是什麽樣子，團隊拍攝了數小時它做各種「鬼臉」的影片。
眉毛也可以動～
然後，就像一個人類在Zoom影片軟件裏看著自己一樣，EVA的內部神經網絡學會了將肌肉運動和影片片段中自己的臉「配對」。
EVA對自己的臉是如何「運動」有了原始的感覺後，讓它將自己與攝影機拍攝的人臉表情匹配上也就不難了。
經過多次改進和叠代，EVA終於獲得了從相機讀取人臉「姿勢」的能力，並透過模仿人類面部表情來做出反應。
整個模仿過程如下：
EVA的大腦主要有兩個神經網絡：生成網絡和逆生成網絡（inverse network）。
給定一幅由普通RGB相機拍攝的人臉影像後，系統首先用OpenPose 提取面部標誌 。
OpenPose，人體姿態辨識專案是美國卡耐基梅隆大學(CMU)基於摺積神經網絡和監督學習並以caffe為框架開發的開源庫。
然後將人臉面部標誌 標準化 為機器人尺寸，將它與靜態機器人臉影像連線到生成網絡，生成合成表情後的機器人影像。
逆生成網絡以該影像為基礎，輸出電機指令讓機器人執行，最終機器人臉上浮現出人類表情。
再來看一組EVA的模仿：
發現EVA還會眨眼睛、扭脖子，但是從正面看的話表情還是有點 僵硬 。
研究人員指出，EVA 還只是一項實驗室實驗， 只會模仿 ，也與真正和人類進行面部表情交流還相去甚遠。但他們相信這種技術終有一天會在現實世界中產生有益的套用。
該研究於 2021 年 5 月 30 日在 ICRA 會議上發表，機器人的藍圖已在 Hardware-X（2021 年 4 月）開源。
關於作者
此次EVA機器人的研究團隊主要成員一共5人，其中3名華人。
機器人軟件部份的專案領導人為Chen Boyuan，吉大本科畢業，現哥倫比亞大學博士生，專業電腦科學與技術，研究方向：機器人、電腦視覺、機器學習。
文中出鏡的小哥胡宇航 ，也是哥倫比亞大學的博士生。本科畢業於廈門大學嘉庚學院，本科期間就申請了多項國家專利，還開了公司，被稱為「科創達人」。
Li Lianfeng, 哥倫比亞大學機器人技術與控制機械工程碩士。
論文地址：https:// arxiv.org/abs/2105.1272 4 專案網站：http://www. cs.columbia.edu/~bchen/ aiface/
參考連結：
https://www. eurekalert.org/pub_rele ases/2021-05/cuso-trs052721.php
—完—
@量子位 · 追蹤AI技術和產品新動態
深有感觸的朋友，歡迎贊同、關註、分享三連վ'ᴗ' ի ❤
