清華虛擬學生彈唱是真人AI換臉?研發團隊再回應

10月19日,有關“清華虛擬學生被質疑真人AI換臉”的話題在網上引發關注。

有網友質疑,此前曾受到關注的“清華虛擬學生華智冰彈唱影片”,只是對B站up魚子醬醬的真人拍攝影片進行了換臉。

清華虛擬學生彈唱是真人AI換臉?研發團隊再回應

清華虛擬學生華智冰彈唱影片 截圖

清華虛擬學生彈唱是真人AI換臉?研發團隊再回應

B站up魚子醬醬釋出的影片 截圖

對此,當天下午小冰團隊釋出《關於華智冰演唱影片的再次說明》。該說明表示,“華智冰演唱影片中的肢體影片模板來自於小冰團隊成員魚子醬醬影片,是從開始就清楚說明的,原影片一直保留在B站上,現場釋出會及影片中也註明了上述來源。”

清華虛擬學生彈唱是真人AI換臉?研發團隊再回應

說明還表示,華智冰演唱影片使用的技術,也並非僅僅AI換臉。新的產品化技術實現了完全虛擬生成不存在的面部及聲音技術,從而實現精度更高的視覺化互動內容。由於從根源上避免了使用任何真實人類面部,有效阻斷以往技術無法避免的隱私侵權問題,是隱私角度的巨大進步。

華智冰是誰?

今年6月,最初有關介紹華智冰的影片裡,華智冰的形象是一名扎著馬尾辮、揹著紅色雙肩包、穿著白板鞋的面容清秀的女生。這段影片一經發布就引起了公眾關注。

據瞭解,華智冰其實是清華大學計算機系知識工程實驗室的一名特殊新生——中國首個原創虛擬學生。其由清華計算機系、北京智源研究院、智譜AI和小冰公司聯合培養。

作為數字虛擬人,華智冰擁有持續的學習能力,能夠逐漸“長大”,不斷“學習”資料中隱含的模式,包括文字、視覺、影象、影片等,就像人類能夠不斷從身邊經歷的事中來學習行為模式一樣。隨著時間的推移,華智冰可以從新場景中學到新能力,並有機地融入自己的模型中,從而變得越來越聰明。

華智冰不僅會四種舞姿,可以根據音樂的急緩調整動作,還可以根據某個字作詩,並可以根據某幾個關鍵詞創作一幅畫,甚至可以寫一些短的文章。

“華智冰彈唱影片”是不是真人AI換臉?

今年9月底,網上一段關於“清華首個虛擬學生華智冰正臉出鏡唱歌”的影片火了。影片裡,華智冰依舊是一名眉目清秀的女孩。她盤腿而坐,抱著吉他忘情地唱著《男孩》。

近日,有網友翻出了B站up魚子醬醬釋出的“女孩天台深情彈唱《男孩》”的影片,並質疑此前的“清華首個虛擬學生華智冰正臉出鏡唱歌”,只是對B站up魚子醬醬的真人拍攝影片進行了AI換臉。

前述“清華首個虛擬學生華智冰正臉出鏡唱歌”引發關注後,小冰公司曾於9月29日釋出“關於‘華智冰’彈唱歌曲影片的說明”。

清華虛擬學生彈唱是真人AI換臉?研發團隊再回應

該說明曾提到,“這次傳播的影片,來自小冰釋出會的進展彙報展示,為華智冰能力續寫了一些新的進展,demo 小冰框架下最新的面部生成和 3D 影片封裝技術成果。具體來說:影片中人物的面部特徵,包括人臉、表情、口型等,全部由人工智慧小冰框架XAvatar生成並進行融合;影片中的人物肢體、動作,包括手持吉他彈唱,來源於小冰團隊成員魚子醬醬錄製的原始影片模版。影片中的歌聲,由人工智慧小冰框架X Studio生成。”

該說明中還表示,華智冰除了3D面部生成,以及歌聲合成的最佳化,還有其他很多更底層的、涉及數字人“大腦”的新技術應用,例如在有機融合了知識圖譜和預訓練模型後,可以讓數字人有常識和推理能力。華智冰正在不斷“成長”中,還會有更多最新技術的應用。

同在9月28日,B站up魚子醬醬在影片評論區說明:有關華智冰的影片原型確實是《男孩》這個影片。這是小冰團隊近期釋出的一項新技術,也是我加入小冰團隊後參與的第一個專案。小冰團隊對《男孩》影片的使用均是經過我授權許可的,大家不用擔心。

10月19日,“清華虛擬學生被質疑真人AI換臉”話題引發關注後,小冰團隊於當天下午釋出《關於華智冰演唱影片的再次說明》,結合前一次說明的內容,對網上質疑進行了迴應。新說明強調,華智冰演唱影片使用的技術,並非僅僅AI換臉。即使是影片中的面部置換,也並非僅僅AI換臉。

公眾對華智冰的幾點誤解

華智冰進入公眾視野以來,已引發多輪關注和不少誤解。比如,很多網友誤以為,華智冰是此前官方宣傳片中那個能行走在清華校園中的女生。其實不然,此前報道中已提到,華智冰是數字虛擬人。華智冰的導師、清華計算機系副主任唐傑教授表示,華智冰會擁有一個完全類似真人的虛擬形象;至於是否打造實體機器人,是一個有爭議的問題。

唐傑還說,“我們嘗試過將華智冰裝進一些實體機器人中,但這並不表示她就是一個實體,或者她因此獲得了多大增量。”

又比如,此次很多人以為,華智冰彈唱只是對真人彈唱影片進行了AI換臉。其實也並非如此。上文中,小冰公司已說明,影片中人物的面部特徵,包括人臉、表情、口型等,全部由人工智慧小冰框架XAvatar生成並進行融合。影片中的歌聲,由人工智慧小冰框架X Studio生成。

華智冰與其他虛擬人有何區別?唐傑曾介紹,“華智冰相當於把形象和大腦結合起來了。我個人的想法是將它真正主體化,讓她能夠像自然人一樣與人交流互動。這種交流對話是基於她所具備的條理性與邏輯性,結合上下文自己新生成的,而非針對預設問題與答案檢索出來一些既定的回答或語句。”

唐傑認為,華智冰的出現對人工智慧領域的最大影響是,人工智慧將由原來的演算法為主,變為未來的AI主體為主。

“演算法為主”與“AI主體為主”有何區別?唐傑解釋,人臉識別體現的就是以演算法為主體的思維,而AI主體思維,就是將人工智慧的大腦看作一個主體,這個主體會有自己的人設,會自己學習、成長,甚至具備智商與情商,能夠自己做一些決策。

澎湃新聞(記者:程婷)