別吵吵內卷了,看看人家虛擬人:連續直播70天都沒工資
虛擬人界有多卷?
近幾年國內外火山噴發般的虛擬人可以說明這一點。
上個月,扎克伯格挑戰光劍變身,右手藏劍,左手亮劍:
這是Meta一直在開展的Codec Avatars項目,目前已經能創建出逼真的虛擬角色,連頭發絲都根根分明。
據了解,該項目使用的是3D捕捉和AI技術,最初以高質量的頭像演示開始,后來逐漸實現構建全身的虛擬化身。
然而,采用這種方式,動作捕捉拍攝三秒鐘所記錄的數據,就足以裝滿一個512G的磁盤。
也就是說,采用這么多攝像頭是對存儲硬件的一種極大的挑戰,需要極多的數據才能創造出一小段demo。
效果是很不錯了,但卷也是真的卷啊,卷的不是虛擬人,是設備啊。
臉書之后,“英偉達發布會里有幾秒鐘的黃仁勛是假的”這個話題,又引起了大眾的激烈討論。
這個真假難辨的黃仁勛,是由英偉達在2019年正式發布的一個計算機圖形與仿真模擬平臺,
在身體表現的部分,英偉達研究團隊聘請了一位演員,讓他穿上動態捕捉裝備,并且記錄下該演員模仿黃仁勛演講的身體姿態。
通過名為Audio to Gesture的技術,使得演講的音頻作為身體動作表現的獨特傳輸驅動。
據悉,該團隊一共做了21個版本的“黃仁勛”。最后,再通過CG動畫渲染技術,才得以實現短短15秒的虛擬“黃仁勛”演示。
效果是很不錯了,但卷的除了設備,還有背后的人類團隊啊。
中國的虛擬人也如浪潮一波又一波洶涌而來。比如,近日爆火的柳夜熙。
柳夜熙是一個虛擬美妝博主,一夜漲粉上百萬不僅僅和她的畫面技術有關系,故事精彩,畫面精致給用戶帶來新穎感,讓人忍不住駐足觀望。
當然啦,漲粉和點贊和虛擬人物柳夜熙的顏值也有很大的關系,柳夜熙的捏臉數據算得上是捏臉界的顏值天花板。
她的穿搭妝發都充斥著東方元素,有著現代和古代文化的碰撞感,臉型是帶有棱角的鵝蛋臉,溫柔中帶著一絲英氣,面部飽滿輪廓清晰流暢,有自己的特色。
而這次的卷不是柳夜熙,是背后的CG、設備、美術等龐大的人類團隊。
就在前兩天,一個新的虛擬人,終于突破了虛擬人界的天花板!堪稱虛擬人屆的卷王!
先來猜一猜,上下兩邊哪個是真人,哪個是虛擬人?
?
答案:都是虛擬人。
他是全球首批和真人原型真假莫辨的數字孿生人——N小黑。
同時,N小黑的「制造者」小冰公司,還公布了他的數字孿生人搭檔:N小白。
這也是人工智能虛擬人類的整體自然度,首次被提升到和真實人類幾乎無法分辨的程度。
當我們談起「數字孿生」——這個用技術復刻現實的新概念時,似乎總是十分遙遠,過去幾年,它在工業制造的熱度不斷攀升,現在,它終于離我們的想象更近了——
N小黑和N小白,作為真人的數字化身,在「每日經濟新聞」直播新聞 70 天,幾乎沒人看出來,這是兩個虛擬人。
當播報新聞的虛擬人在眼前真假難辨,恰恰證明了技術的飛速演進,正為我們的生活帶來了更?多新可能。
當然,卷也是真的卷啊,直播70天還沒工資。
首批數字孿生虛擬人,怎么做到真假難辨?
各式各樣的虛擬人,我們已經并不陌生。
N小黑和N小白這次最大的突破,用一句話來概括就是:真實,高效,無人化。
真實之處,我們已經能從畫面上輕易感受——
屏幕前,N小黑正鏗鏘有力地播報著今日的熱點資訊。
他雙手握在身前,眼睛自然眨動,嘴唇輕啟,口型會根據每個字的發音而變化,眉毛也隨著情緒上下擺動,甚至臉上可以看到因吐字而波動的肌膚紋理。
要做到這一點,必須得先說說小冰深度神經網絡渲染技術(Xiaoice Neural Rendering, XNR)了。
這項技術,主要是通過深度學習,從大量數據中提取數據先驗,就能實現快速渲染。要知道,傳統的 CG 和動作捕捉不僅耗時很長,而且成本極高。
比方說,一部 CG 電影里,最難制作的特效之一就是頭發。每當虛擬人的幾十萬根發絲在飄,那就是經費在瘋狂燃燒。
小冰這項技術,首先就解決了低效率、高成本的問題。
接著,該技術還能基于深度學習的三維場景表達和對應的神經渲染管線,在特定場景中發揮作用,虛擬人的視覺形象、表情、肢體動作就都能「復刻」且還原。
這樣,他們看起來就更加真實了。
我們總是能清晰分辨出 CG 或 CG+動作捕捉制造出來的虛擬人,因為他們要不長得跟漫畫里一樣,要不就是一副撲克臉,一說話或微笑就露出破綻,生硬的動作也讓人感到隱隱不適。
所以虛擬人的制造者們,需要花很多功夫去彌補其中的不自然之處。
前陣子很火的虛擬人柳夜熙,其實是由「真人身體+虛擬面部+酷炫特效」結合呈現,只看柳夜熙臉的話,還是能看到她在表情管理上的不足。
數字孿生人,與其說是讓虛擬人變得更真實,不如說是讓虛擬人變得更自然。
這種整體的自然度,具有更多「人情味」,而不是帶給人「似像非像」的詭異感覺。「自然」能讓人感覺到驚喜,也能讓虛擬人更親近人,且更容易進入我們的日常生活。
從最開始,小冰通過知名財經主播N小黑(N小黑財經)和N小白(每經小白基金)獲取訓練數據,到通過深度神經網絡渲染技術改善數據,最后通過小冰框架小樣本學習技術——
只要一周,兩個虛擬數字人就誕生了。
他們不僅能干人干的活,還能干人難以干的活,以及其他虛擬人干不了的活。
這次小冰公司還在全球范圍內,首次實現了視頻采編播全流程的無人化操作。
也就是說,他們不僅形象是AI建模生成的,從金融資訊的文本生成,到通過預訓練的虛擬主播實現音畫同步播報,再結合同步場景動態繪制,最終生成完整的直播推流,全都是由 AI 完成。
?小冰與每日經濟新聞聯合推出的「每經AI電視」,也成了全球首個7x24小時不間斷播出的AI視頻直播產品。
可以說,無論對于虛擬行業或是大眾層面,小冰公司都提出了一個新的解決方案。
虛擬人越來越流行,也離生活越來越近
在虛擬人的道路上,小冰已經嘗試過很多種可能。
從最初的聊天機器人,到能寫詩寫歌的 AI少女小冰、再到后來的小冰虛擬男/女友,今年還推出了虛擬偶像 MERROR,以及由千千萬萬虛擬人和人類混居的新平臺——小冰島。?
?△圖片依次為少女小冰、MERROR、小冰島虛擬人
這些虛擬人背后,都基于小冰框架,本質也就是「AI beings」,它將能定制各類人工智能個體,也會在未來帶來更多元的可能性。
N小黑和N小白,是小冰在 AI being 時代的最新探索。
不過要想走得長久,走進人們日常生活,還是得靠「內容」說話。
最早我們對虛擬人傳達內容的期待,可能就是人工客服的回應,或者喊一聲小愛同學對方回復「我在呢」。
現在,幾乎市場上的虛擬人都還有點兒才藝,因為有了中之人,所以他們開始會唱歌、拍視頻、和人交互。
而N小黑和N小白已經能從視覺、聲音、文字上都自由表達,還能實現實時音視頻流。
在數字孿生、框架全能力、多模態交互,以及實時音視頻上,小冰都跨出了領先的一步。這些能力,能讓虛擬人打破虛擬和真實的界限,更自然無形地融入我們的生活空間。
接下來正在迪拜世博會中國館參展的夏語冰可能也將營業,這又是小冰團隊的一個力作,虛擬數字主播接下來還能幫人們講解網課、播報天氣預報、科教科普……?
?△圖片為夏語冰
未來的虛擬人,其實還有更多的想象空間。
但當下要讓他們離我們更近,就是真正走進我們生活,添補我們現有的需求,真正解決一些實際問題。
虛擬未來,得更實在
隨著虛擬數字浪潮一波波襲來,我們會越來越習慣虛擬人和真人共存的社會。
艾媒咨詢《2021 中國虛擬偶像行業發展及網民調查研究報告》指出,2020年中國虛擬偶像核心產業規模為34.6億元,預計2021年達到62.2億元。
就在前幾天,索尼才聯手B站開啟了全球虛擬偶像「Virtual Cinderella Project」項目。
?未來幾年,虛擬人也會和人類建立更多元和深層的商業關系及情感紐帶。
不過當下,虛擬人要在我們日常生活中普及,每個挑戰都是一座山。
比如,內容不足、表現不佳、周期太長、成本太高、運營不足,都是虛擬人如曇花一現,隨后一波波倒下的原因。
虛擬人已經從娛樂、時尚、社交,慢慢應用到教育、醫療、金融的各個領域,但真正做出商業化成績的還不多,走進用戶心里的并不多,真正給我們日常生活帶來幫助的也不多。
而隨著樂華娛樂與華納音樂紛紛推出虛擬偶像,互聯網大廠如騰訊系、網易、快手、B 站、阿里系都開始涉足虛擬人,又預示著他們未來的潛力。
△圖片為韓國女團Aespa的專屬虛擬角色
當然,不能否認,元宇宙、NFT、區塊鏈等系列新概念的火爆,也推動了資本的行動。
但空談和幻想,只會讓虛擬人的好處離我們越來越遠。
今年11月的《中國計算機學會通訊》,封面專題就是「計算機圖形學與人工智能融合」,探討了CG和AI從技術到應用的廣泛融合,希望技術還能夠有更大的突破。
放遠來看,虛擬人商業化的未來,就只是時間問題了。
在虛擬之風盛行時,我們同樣需要實干興邦。虛擬人背后的基層技術,決定了虛擬人的落地程度。
當一個個想象踏實落地后,虛擬才能成為新的現實。
本文來自微信公眾號“量子位”(ID:QbitAI),作者:小冰,36氪經授權發布。