朱唇輕啟,嘴角含笑,這半張臉很普通。
而整個人,看上去也很普通。
但她不普通,因為,她,不是人。
作為數(shù)字虛擬人,她有自己的名字,Siren,意為古希臘傳說中半人半鳥的女海妖。
由騰訊互娛事業(yè)群的NEXT Studio 與Epic Games、Cubic Motion和3Lateral等業(yè)內(nèi)各領(lǐng)域頂尖公司聯(lián)合團(tuán)隊開發(fā)而成。
她,實際上也是人。
她的面部形象,來自于中國的女演員姜冰潔。
但Siren也可以是所有人,她能夠惟妙惟肖地“演繹”出其他人的表情,包括你的。
這項成果代表了目前實時渲染技術(shù)的業(yè)界頂尖水平。
Siren所有的動作表情都是實時捕捉并實時渲染。
只要將這套動捕設(shè)備,戴在你頭上。它能實時跟蹤200多個面部特征點,并將這些數(shù)據(jù)實時地映射到Siren的面部Rig(骨骼綁定)驅(qū)動Siren的3D臉部模型。
動作表情以每秒60幀輸出在屏幕上。
最最重點的是——數(shù)字虛擬人是可以基于任何人的樣子進(jìn)行掃描,掃描之后,TA就是被掃描者的復(fù)刻和分身了。
而驅(qū)動這一數(shù)字虛擬人的表情和動作的,可以是其他人。
這樣,很多奇妙的事情就可以發(fā)生了。
周杰倫曾經(jīng)幻想,能穿越時空,回到30年前,跟鄧麗君合唱一首歌。
他說:那是多么榮幸的一件事啊。
30年后,他真的,跟她,隔空對唱。
周杰倫沒有想到——這場機(jī)緣來自科技,是45名工程師耗2個月心血打造,這場重逢,讓兩個時代的歌手,在萬千目光中,共譜了一曲。
《速度與激情7》里,保羅·沃克在不幸離世前,電影只拍完了八成左右的戲份,劇組是如何處理余下未拍攝的呢?
導(dǎo)演只好用CG方式來制作數(shù)字替身,輔以3D跟蹤和相機(jī)運動匹配來完成剩余鏡頭,他還找來沃克的兄弟拍攝沃克的戲份。
影片的結(jié)尾,導(dǎo)演把保羅之前的影像剪輯到一起,給影迷一份深刻動人的完美懷念。
過去,讓逝去的人重生,仿佛是一個無法實現(xiàn)的夢。科技讓一切變得可能。
Siren的出現(xiàn),可以讓人物“還原”,變得更簡單。
如果說3D“鄧麗君”、“保羅”像電影特效制作一樣,是一幀幀通過離線渲染摳出來的,那么Siren則是實時渲染出來的,可以實時互動。
這個過程在15毫秒內(nèi)完成,一般人幾乎感受不到延遲。
而為了追相片級的表現(xiàn),整個開發(fā)過程,團(tuán)隊都需要在不同光照條件和相機(jī)位置下對比真實照片和引擎渲染結(jié)果,一點點修正。
換衣服對于她來說,就是揮揮手,抖三抖的事
現(xiàn)在Siren不管是高精度的面部動捕,還有長時間的身體動作捕捉,都一步步的做到盡可能的接近真實。
有了它,你可以和任何一個“人”實時互動交流。
那么有了Siren之后,會帶來哪些改變?
我們可以大膽想象,未來,你也可以像《頭號玩家》里的主人公一樣,將自己的一舉一動映射到虛擬角色身上,他是通過魔幻眼鏡完成自由變身,而你通過Siren,完成置換。
除了在游戲中感受虛擬人的魅力,Siren在影視方向的想象空間也很大。
要知道,從替身到摳像,從人皮面具到真人倒模,在這些方面,電影的創(chuàng)意可謂層出不窮。
有了Siren之后,你再也不用擔(dān)心這些流量小花鮮肉的演技了,形象掃一掃,剩下的表情驅(qū)動請交給真正的“演技派”。
當(dāng)然對于老藝術(shù)家,我們也可以在他們年輕時,用數(shù)字化技術(shù)將他們定格在最美的時候,讓他們的才華在藝術(shù)作品中以最鮮活的姿態(tài)存在。
除了成為“復(fù)刻”的明星,Siren本身是不是也可以成為全能偶像?
完全可以啊。初音未來多火不用說,洛天依的名字你想必也不陌生,那么對于更真實的Siren,潛力更是無限。
出個MV,上綜藝,甚至開演唱會,代言游戲都不是問題,如果被賦予人工智能,能夠想象的空間足夠大。
你也可以成為虛擬主播?
脫離各種后期加持,無需動漫制作,告別濾鏡、醫(yī)美,面對最考驗實時技術(shù)的直播,相信Siren小姐姐,也能應(yīng)付自如,不用錄播,人設(shè)就立在那里。
可能你所看到的女性Siren背后,驅(qū)動的是一個摳腳大漢呢。
還能變身智能語音助手?
Siren現(xiàn)在還需要真人驅(qū)動,未來,是否可以由AI驅(qū)動?那么想象家里像《銀翼殺手》里,有一個虛擬伴侶或助手,想必很奇妙,叫你起床,關(guān)照你增添衣物,家里的一切因為她而變得舒心,感覺擁有了一個田螺姑娘呢。
“高保真,實時渲染,可交互,虛擬數(shù)字人....."
這些技術(shù)亮點背后,是Project Siren背后站著的一群人帶來的嘗試。
這群由騰訊互娛事業(yè)群的NEXT Studio 與業(yè)內(nèi)各領(lǐng)域頂尖公司聯(lián)合組成的開發(fā)團(tuán)隊,正努力鍛造超真實虛擬偶像的可能性。
未來,充滿不確定性和挑戰(zhàn),我們期待Siren的再一次“改變”。
-
3D
+關(guān)注
關(guān)注
9文章
2910瀏覽量
107874 -
數(shù)字化
+關(guān)注
關(guān)注
8文章
8846瀏覽量
62091 -
智能語音
+關(guān)注
關(guān)注
10文章
789瀏覽量
48873
原文標(biāo)題:她叫Siren,不是人,也可以是所有人
文章出處:【微信號:szwlw26059696,微信公眾號:物聯(lián)網(wǎng)之聲】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
相關(guān)推薦
評論