虛擬人界有多卷?
近幾年國內(nèi)外火山噴發(fā)般的虛擬人可以說明這一點(diǎn)。
上個月,扎克伯格挑戰(zhàn)光劍變身,右手藏劍,左手亮劍:
這是Meta一直在開展的Codec Avatars項(xiàng)目,目前已經(jīng)能創(chuàng)建出逼真的虛擬角色,連頭發(fā)絲都根根分明。
據(jù)了解,該項(xiàng)目使用的是3D捕捉和AI技術(shù),最初以高質(zhì)量的頭像演示開始,后來逐漸實(shí)現(xiàn)構(gòu)建全身的虛擬化身。
然而,采用這種方式,動作捕捉拍攝三秒鐘所記錄的數(shù)據(jù),就足以裝滿一個512G的磁盤。
也就是說,采用這么多攝像頭是對存儲硬件的一種極大的挑戰(zhàn),需要極多的數(shù)據(jù)才能創(chuàng)造出一小段demo。
效果是很不錯了,但卷也是真的卷啊,卷的不是虛擬人,是設(shè)備啊。
臉書之后,“英偉達(dá)發(fā)布會里有幾秒鐘的黃仁勛是假的”這個話題,又引起了大眾的激烈討論。
這個真假難辨的黃仁勛,是由英偉達(dá)在2019年正式發(fā)布的一個計(jì)算機(jī)圖形與仿真模擬平臺,
在身體表現(xiàn)的部分,英偉達(dá)研究團(tuán)隊(duì)聘請了一位演員,讓他穿上動態(tài)捕捉裝備,并且記錄下該演員模仿黃仁勛演講的身體姿態(tài)。
通過名為Audio to Gesture的技術(shù),使得演講的音頻作為身體動作表現(xiàn)的獨(dú)特傳輸驅(qū)動。
據(jù)悉,該團(tuán)隊(duì)一共做了21個版本的“黃仁勛”。最后,再通過CG動畫渲染技術(shù),才得以實(shí)現(xiàn)短短15秒的虛擬“黃仁勛”演示。
效果是很不錯了,但卷的除了設(shè)備,還有背后的人類團(tuán)隊(duì)啊。
中國的虛擬人也如浪潮一波又一波洶涌而來。比如,近日爆火的柳夜熙。
柳夜熙是一個虛擬美妝博主,一夜?jié)q粉上百萬不僅僅和她的畫面技術(shù)有關(guān)系,故事精彩,畫面精致給用戶帶來新穎感,讓人忍不住駐足觀望。
當(dāng)然啦,漲粉和點(diǎn)贊和虛擬人物柳夜熙的顏值也有很大的關(guān)系,柳夜熙的捏臉數(shù)據(jù)算得上是捏臉界的顏值天花板。
她的穿搭妝發(fā)都充斥著東方元素,有著現(xiàn)代和古代文化的碰撞感,臉型是帶有棱角的鵝蛋臉,溫柔中帶著一絲英氣,面部飽滿輪廓清晰流暢,有自己的特色。
而這次的卷不是柳夜熙,是背后的CG、設(shè)備、美術(shù)等龐大的人類團(tuán)隊(duì)。
就在前兩天,一個新的虛擬人,終于突破了虛擬人界的天花板!堪稱虛擬人屆的卷王!
先來猜一猜,上下兩邊哪個是真人,哪個是虛擬人?
?
答案:都是虛擬人。
他是全球首批和真人原型真假莫辨的數(shù)字孿生人——N小黑。
同時,N小黑的「制造者」小冰公司,還公布了他的數(shù)字孿生人搭檔:N小白。
這也是人工智能虛擬人類的整體自然度,首次被提升到和真實(shí)人類幾乎無法分辨的程度。
當(dāng)我們談起「數(shù)字孿生」——這個用技術(shù)復(fù)刻現(xiàn)實(shí)的新概念時,似乎總是十分遙遠(yuǎn),過去幾年,它在工業(yè)制造的熱度不斷攀升,現(xiàn)在,它終于離我們的想象更近了——
N小黑和N小白,作為真人的數(shù)字化身,在「每日經(jīng)濟(jì)新聞」直播新聞 70 天,幾乎沒人看出來,這是兩個虛擬人。
當(dāng)播報新聞的虛擬人在眼前真假難辨,恰恰證明了技術(shù)的飛速演進(jìn),正為我們的生活帶來了更?多新可能。
當(dāng)然,卷也是真的卷啊,直播70天還沒工資。
首批數(shù)字孿生虛擬人,怎么做到真假難辨?
各式各樣的虛擬人,我們已經(jīng)并不陌生。
N小黑和N小白這次最大的突破,用一句話來概括就是:真實(shí),高效,無人化。
真實(shí)之處,我們已經(jīng)能從畫面上輕易感受——
屏幕前,N小黑正鏗鏘有力地播報著今日的熱點(diǎn)資訊。
他雙手握在身前,眼睛自然眨動,嘴唇輕啟,口型會根據(jù)每個字的發(fā)音而變化,眉毛也隨著情緒上下擺動,甚至臉上可以看到因吐字而波動的肌膚紋理。
要做到這一點(diǎn),必須得先說說小冰深度神經(jīng)網(wǎng)絡(luò)渲染技術(shù)(Xiaoice Neural Rendering, XNR)了。
這項(xiàng)技術(shù),主要是通過深度學(xué)習(xí),從大量數(shù)據(jù)中提取數(shù)據(jù)先驗(yàn),就能實(shí)現(xiàn)快速渲染。要知道,傳統(tǒng)的 CG 和動作捕捉不僅耗時很長,而且成本極高。
比方說,一部 CG 電影里,最難制作的特效之一就是頭發(fā)。每當(dāng)虛擬人的幾十萬根發(fā)絲在飄,那就是經(jīng)費(fèi)在瘋狂燃燒。
小冰這項(xiàng)技術(shù),首先就解決了低效率、高成本的問題。
接著,該技術(shù)還能基于深度學(xué)習(xí)的三維場景表達(dá)和對應(yīng)的神經(jīng)渲染管線,在特定場景中發(fā)揮作用,虛擬人的視覺形象、表情、肢體動作就都能「復(fù)刻」且還原。
這樣,他們看起來就更加真實(shí)了。
我們總是能清晰分辨出 CG 或 CG+動作捕捉制造出來的虛擬人,因?yàn)樗麄円婚L得跟漫畫里一樣,要不就是一副撲克臉,一說話或微笑就露出破綻,生硬的動作也讓人感到隱隱不適。
所以虛擬人的制造者們,需要花很多功夫去彌補(bǔ)其中的不自然之處。
前陣子很火的虛擬人柳夜熙,其實(shí)是由「真人身體+虛擬面部+酷炫特效」結(jié)合呈現(xiàn),只看柳夜熙臉的話,還是能看到她在表情管理上的不足。
數(shù)字孿生人,與其說是讓虛擬人變得更真實(shí),不如說是讓虛擬人變得更自然。
這種整體的自然度,具有更多「人情味」,而不是帶給人「似像非像」的詭異感覺?!缸匀弧鼓茏屓烁杏X到驚喜,也能讓虛擬人更親近人,且更容易進(jìn)入我們的日常生活。
從最開始,小冰通過知名財經(jīng)主播N小黑(N小黑財經(jīng))和N小白(每經(jīng)小白基金)獲取訓(xùn)練數(shù)據(jù),到通過深度神經(jīng)網(wǎng)絡(luò)渲染技術(shù)改善數(shù)據(jù),最后通過小冰框架小樣本學(xué)習(xí)技術(shù)——
只要一周,兩個虛擬數(shù)字人就誕生了。
他們不僅能干人干的活,還能干人難以干的活,以及其他虛擬人干不了的活。
這次小冰公司還在全球范圍內(nèi),首次實(shí)現(xiàn)了視頻采編播全流程的無人化操作。
也就是說,他們不僅形象是AI建模生成的,從金融資訊的文本生成,到通過預(yù)訓(xùn)練的虛擬主播實(shí)現(xiàn)音畫同步播報,再結(jié)合同步場景動態(tài)繪制,最終生成完整的直播推流,全都是由 AI 完成。
?小冰與每日經(jīng)濟(jì)新聞聯(lián)合推出的「每經(jīng)AI電視」,也成了全球首個7x24小時不間斷播出的AI視頻直播產(chǎn)品。
可以說,無論對于虛擬行業(yè)或是大眾層面,小冰公司都提出了一個新的解決方案。
虛擬人越來越流行,也離生活越來越近
在虛擬人的道路上,小冰已經(jīng)嘗試過很多種可能。
從最初的聊天機(jī)器人,到能寫詩寫歌的 AI少女小冰、再到后來的小冰虛擬男/女友,今年還推出了虛擬偶像 MERROR,以及由千千萬萬虛擬人和人類混居的新平臺——小冰島。?
?△圖片依次為少女小冰、MERROR、小冰島虛擬人
這些虛擬人背后,都基于小冰框架,本質(zhì)也就是「AI beings」,它將能定制各類人工智能個體,也會在未來帶來更多元的可能性。
N小黑和N小白,是小冰在 AI being 時代的最新探索。
不過要想走得長久,走進(jìn)人們?nèi)粘I?,還是得靠「內(nèi)容」說話。
最早我們對虛擬人傳達(dá)內(nèi)容的期待,可能就是人工客服的回應(yīng),或者喊一聲小愛同學(xué)對方回復(fù)「我在呢」。
現(xiàn)在,幾乎市場上的虛擬人都還有點(diǎn)兒才藝,因?yàn)橛辛酥兄?,所以他們開始會唱歌、拍視頻、和人交互。
而N小黑和N小白已經(jīng)能從視覺、聲音、文字上都自由表達(dá),還能實(shí)現(xiàn)實(shí)時音視頻流。
在數(shù)字孿生、框架全能力、多模態(tài)交互,以及實(shí)時音視頻上,小冰都跨出了領(lǐng)先的一步。這些能力,能讓虛擬人打破虛擬和真實(shí)的界限,更自然無形地融入我們的生活空間。
接下來正在迪拜世博會中國館參展的夏語冰可能也將營業(yè),這又是小冰團(tuán)隊(duì)的一個力作,虛擬數(shù)字主播接下來還能幫人們講解網(wǎng)課、播報天氣預(yù)報、科教科普……?
?△圖片為夏語冰
未來的虛擬人,其實(shí)還有更多的想象空間。
但當(dāng)下要讓他們離我們更近,就是真正走進(jìn)我們生活,添補(bǔ)我們現(xiàn)有的需求,真正解決一些實(shí)際問題。
虛擬未來,得更實(shí)在
隨著虛擬數(shù)字浪潮一波波襲來,我們會越來越習(xí)慣虛擬人和真人共存的社會。
艾媒咨詢《2021 中國虛擬偶像行業(yè)發(fā)展及網(wǎng)民調(diào)查研究報告》指出,2020年中國虛擬偶像核心產(chǎn)業(yè)規(guī)模為34.6億元,預(yù)計(jì)2021年達(dá)到62.2億元。
就在前幾天,索尼才聯(lián)手B站開啟了全球虛擬偶像「Virtual Cinderella Project」項(xiàng)目。
?未來幾年,虛擬人也會和人類建立更多元和深層的商業(yè)關(guān)系及情感紐帶。
不過當(dāng)下,虛擬人要在我們?nèi)粘I钪衅占?,每個挑戰(zhàn)都是一座山。
比如,內(nèi)容不足、表現(xiàn)不佳、周期太長、成本太高、運(yùn)營不足,都是虛擬人如曇花一現(xiàn),隨后一波波倒下的原因。
虛擬人已經(jīng)從娛樂、時尚、社交,慢慢應(yīng)用到教育、醫(yī)療、金融的各個領(lǐng)域,但真正做出商業(yè)化成績的還不多,走進(jìn)用戶心里的并不多,真正給我們?nèi)粘I顜韼椭囊膊欢唷?/p>
而隨著樂華娛樂與華納音樂紛紛推出虛擬偶像,互聯(lián)網(wǎng)大廠如騰訊系、網(wǎng)易、快手、B 站、阿里系都開始涉足虛擬人,又預(yù)示著他們未來的潛力。
△圖片為韓國女團(tuán)Aespa的專屬虛擬角色
當(dāng)然,不能否認(rèn),元宇宙、NFT、區(qū)塊鏈等系列新概念的火爆,也推動了資本的行動。
但空談和幻想,只會讓虛擬人的好處離我們越來越遠(yuǎn)。
今年11月的《中國計(jì)算機(jī)學(xué)會通訊》,封面專題就是「計(jì)算機(jī)圖形學(xué)與人工智能融合」,探討了CG和AI從技術(shù)到應(yīng)用的廣泛融合,希望技術(shù)還能夠有更大的突破。
放遠(yuǎn)來看,虛擬人商業(yè)化的未來,就只是時間問題了。
在虛擬之風(fēng)盛行時,我們同樣需要實(shí)干興邦。虛擬人背后的基層技術(shù),決定了虛擬人的落地程度。
當(dāng)一個個想象踏實(shí)落地后,虛擬才能成為新的現(xiàn)實(shí)。
本文來自微信公眾號“量子位”(ID:QbitAI),作者:小冰,36氪經(jīng)授權(quán)發(fā)布。
- 濕地之美|廣州海珠濕地
- (熱點(diǎn)觀察 漫評)美國對歐洲盟友“下狠手”
- 全球微動態(tài)丨德媒文章:政治極化愈演愈烈,美國民主面臨墮落
- 每日觀察!海河觀津丨百萬候鳥來“息”,它們?yōu)楹纹珢郾贝蟾郏?/a>
- 焦點(diǎn)!一起來拍中國空間站!
- 焦點(diǎn)播報:北京新增本土感染者16例 詳情公布
- 天天快看點(diǎn)丨遼寧匯聚高校校友資源 引青年人才在遼創(chuàng)新創(chuàng)業(yè)
- 每日熱文:夢天成功發(fā)射!天空飄來一個字:6
- 環(huán)球最資訊丨長圖丨“院士天團(tuán)”做優(yōu)“湖南飯”,該是什么味?
- 常益懷等5市州明早有大霧 出行請注意安全
- 環(huán)球動態(tài):11月全省溫高干旱持續(xù)發(fā)展
- 【全球獨(dú)家】10月制造業(yè)PMI為49.2% 建筑業(yè)景氣水平較高
- 環(huán)球今日訊!亞馬遜營業(yè)利潤率下降至2% 國內(nèi)頭部電商或進(jìn)一步搶占海外市場
- 國家藥監(jiān)局:促進(jìn)彩色隱形眼鏡生產(chǎn)經(jīng)營企業(yè)規(guī)范化發(fā)展
- 即時焦點(diǎn):智慧芽升級科創(chuàng)力評估平臺 累計(jì)上線12條產(chǎn)業(yè)技術(shù)鏈
- 【世界熱聞】內(nèi)蒙古啟動人力資源誠信服務(wù)示范機(jī)構(gòu)評選
- 環(huán)球觀焦點(diǎn):內(nèi)蒙古:這5項(xiàng)職業(yè)資格考試暫停
- 全球熱門:飛天圓夢|靜待夢天,中國空間站在軌建造收官在即
- 飛天圓夢|“夢天”已就位!楊利偉動情講述“初代”航天人故事
- 對標(biāo)保時捷Taycan?大眾中國功勛蘇偉銘親自下場造車
- 北京石景山開展冬季供暖前特種設(shè)備安全專項(xiàng)檢查
- 陜西延安:開展兒童化妝品專項(xiàng)檢查 規(guī)范化妝品市
- 北京海淀開展商品條碼專項(xiàng)監(jiān)督檢查 努力打造穩(wěn)定
- 金華推進(jìn)網(wǎng)絡(luò)直播營銷治理顯成效 培育放心消費(fèi)直
- 北京延慶對重點(diǎn)行業(yè)開展格式條款專項(xiàng)檢查 做好市
- 北京海淀開展電動自行車整治夜查行動 全力保障轄
- 江蘇昆山全力規(guī)范大閘蟹市場秩序 營造安全放心消
- 福建寧化開展“兩品一械”網(wǎng)絡(luò)銷售專項(xiàng)檢查 保障
- 北京懷柔:開展市場綜合執(zhí)法監(jiān)督檢查 督導(dǎo)各類經(jīng)
- 天津河?xùn)|:多措并舉推進(jìn)企業(yè)信用修復(fù)工作 助力轄