0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

有了Siren之后,會帶來哪些改變?

物聯(lián)網(wǎng)之聲 ? 來源:未知 ? 作者:李倩 ? 2018-06-06 17:16 ? 次閱讀

朱唇輕啟,嘴角含笑,這半張臉很普通。

而整個人,看上去也很普通。

但她不普通,因為,她,不是人。

作為數(shù)字虛擬人,她有自己的名字,Siren,意為古希臘傳說中半人半鳥的女海妖。

由騰訊互娛事業(yè)群的NEXT Studio 與Epic Games、Cubic Motion和3Lateral等業(yè)內(nèi)各領(lǐng)域頂尖公司聯(lián)合團(tuán)隊開發(fā)而成。

她,實際上也是人。

她的面部形象,來自于中國的女演員姜冰潔。

但Siren也可以是所有人,她能夠惟妙惟肖地“演繹”出其他人的表情,包括你的。

這項成果代表了目前實時渲染技術(shù)的業(yè)界頂尖水平。

Siren所有的動作表情都是實時捕捉并實時渲染。

只要將這套動捕設(shè)備,戴在你頭上。它能實時跟蹤200多個面部特征點,并將這些數(shù)據(jù)實時地映射到Siren的面部Rig(骨骼綁定)驅(qū)動Siren的3D臉部模型。

動作表情以每秒60幀輸出在屏幕上。

最最重點的是——數(shù)字虛擬人是可以基于任何人的樣子進(jìn)行掃描,掃描之后,TA就是被掃描者的復(fù)刻和分身了。

而驅(qū)動這一數(shù)字虛擬人的表情和動作的,可以是其他人。

這樣,很多奇妙的事情就可以發(fā)生了。

周杰倫曾經(jīng)幻想,能穿越時空,回到30年前,跟鄧麗君合唱一首歌。

他說:那是多么榮幸的一件事啊。

30年后,他真的,跟她,隔空對唱。

周杰倫沒有想到——這場機(jī)緣來自科技,是45名工程師耗2個月心血打造,這場重逢,讓兩個時代的歌手,在萬千目光中,共譜了一曲。

《速度與激情7》里,保羅·沃克在不幸離世前,電影只拍完了八成左右的戲份,劇組是如何處理余下未拍攝的呢?

導(dǎo)演只好用CG方式來制作數(shù)字替身,輔以3D跟蹤和相機(jī)運動匹配來完成剩余鏡頭,他還找來沃克的兄弟拍攝沃克的戲份。

影片的結(jié)尾,導(dǎo)演把保羅之前的影像剪輯到一起,給影迷一份深刻動人的完美懷念。

過去,讓逝去的人重生,仿佛是一個無法實現(xiàn)的夢。科技讓一切變得可能。

Siren的出現(xiàn),可以讓人物“還原”,變得更簡單。

如果說3D“鄧麗君”、“保羅”像電影特效制作一樣,是一幀幀通過離線渲染摳出來的,那么Siren則是實時渲染出來的,可以實時互動。

這個過程在15毫秒內(nèi)完成,一般人幾乎感受不到延遲。

而為了追相片級的表現(xiàn),整個開發(fā)過程,團(tuán)隊都需要在不同光照條件和相機(jī)位置下對比真實照片和引擎渲染結(jié)果,一點點修正。

換衣服對于她來說,就是揮揮手,抖三抖的事

現(xiàn)在Siren不管是高精度的面部動捕,還有長時間的身體動作捕捉,都一步步的做到盡可能的接近真實。

有了它,你可以和任何一個“人”實時互動交流。

那么有了Siren之后,會帶來哪些改變?

我們可以大膽想象,未來,你也可以像《頭號玩家》里的主人公一樣,將自己的一舉一動映射到虛擬角色身上,他是通過魔幻眼鏡完成自由變身,而你通過Siren,完成置換。

除了在游戲中感受虛擬人的魅力,Siren在影視方向的想象空間也很大。

要知道,從替身到摳像,從人皮面具到真人倒模,在這些方面,電影的創(chuàng)意可謂層出不窮。

有了Siren之后,你再也不用擔(dān)心這些流量小花鮮肉的演技了,形象掃一掃,剩下的表情驅(qū)動請交給真正的“演技派”。

當(dāng)然對于老藝術(shù)家,我們也可以在他們年輕時,用數(shù)字化技術(shù)將他們定格在最美的時候,讓他們的才華在藝術(shù)作品中以最鮮活的姿態(tài)存在。

除了成為“復(fù)刻”的明星,Siren本身是不是也可以成為全能偶像?

完全可以啊。初音未來多火不用說,洛天依的名字你想必也不陌生,那么對于更真實的Siren,潛力更是無限。

出個MV,上綜藝,甚至開演唱會,代言游戲都不是問題,如果被賦予人工智能,能夠想象的空間足夠大。

你也可以成為虛擬主播?

脫離各種后期加持,無需動漫制作,告別濾鏡、醫(yī)美,面對最考驗實時技術(shù)的直播,相信Siren小姐姐,也能應(yīng)付自如,不用錄播,人設(shè)就立在那里。

可能你所看到的女性Siren背后,驅(qū)動的是一個摳腳大漢呢。

還能變身智能語音助手?

Siren現(xiàn)在還需要真人驅(qū)動,未來,是否可以由AI驅(qū)動?那么想象家里像《銀翼殺手》里,有一個虛擬伴侶或助手,想必很奇妙,叫你起床,關(guān)照你增添衣物,家里的一切因為她而變得舒心,感覺擁有了一個田螺姑娘呢。

“高保真,實時渲染,可交互,虛擬數(shù)字人....."

這些技術(shù)亮點背后,是Project Siren背后站著的一群人帶來的嘗試。

這群由騰訊互娛事業(yè)群的NEXT Studio 與業(yè)內(nèi)各領(lǐng)域頂尖公司聯(lián)合組成的開發(fā)團(tuán)隊,正努力鍛造超真實虛擬偶像的可能性。

未來,充滿不確定性和挑戰(zhàn),我們期待Siren的再一次“改變”。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 3D
    3D
    +關(guān)注

    關(guān)注

    9

    文章

    2910

    瀏覽量

    107874
  • 數(shù)字化
    +關(guān)注

    關(guān)注

    8

    文章

    8846

    瀏覽量

    62091
  • 智能語音
    +關(guān)注

    關(guān)注

    10

    文章

    789

    瀏覽量

    48873

原文標(biāo)題:她叫Siren,不是人,也可以是所有人

文章出處:【微信號:szwlw26059696,微信公眾號:物聯(lián)網(wǎng)之聲】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    哪些些因素導(dǎo)致LDC1614復(fù)位?

    使用過程中時常遇到讀回數(shù)據(jù)突然為0的情況,經(jīng)過檢查,發(fā)現(xiàn)此時寄存器的值已經(jīng)變成復(fù)位狀態(tài),請問,哪些些因素導(dǎo)致LDC1614復(fù)位?
    發(fā)表于 01-02 08:15

    使用ads1292采集心電時,什么原因造成輸入阻抗減???

    在使用ads1292采集心電時,做了一個demo板,進(jìn)行測試,輸入阻抗達(dá)標(biāo); 之后由于考慮到解決靜電的問題,進(jìn)行了大量的鋪銅,其中信號輸入走線被地包裹;再測輸入阻抗,不達(dá)標(biāo)(前端電路沒有改變) 初步懷疑是否為走線與地之間的寄
    發(fā)表于 12-13 09:34

    恒訊科技分析:SD-WAN組網(wǎng)技術(shù)對傳統(tǒng)網(wǎng)絡(luò)改變?

    SD-WAN組網(wǎng)技術(shù)對傳統(tǒng)網(wǎng)絡(luò)帶來改變主要體現(xiàn)在以下幾個方面: 1、技術(shù)架構(gòu)的變化:SD-WAN實現(xiàn)控制與轉(zhuǎn)發(fā)的分離,通過網(wǎng)絡(luò)虛擬化、IT化和軟件化,有效解決網(wǎng)絡(luò)資源的靈活配置問
    的頭像 發(fā)表于 11-07 09:49 ?261次閱讀

    有沒有什么辦法在不改變電源和功率的情況下來解決TPA311XD2失真的問題?

    換了大電源之后就沒有失真,有沒有什么辦法在不改變電源和功率的情況下來解決芯片失真的問題,謝謝?。?!
    發(fā)表于 10-25 08:34

    TLV3501做的50HZ工頻信號的過零比較,帶來相位的偏移什么辦法可以解決嗎?

    我現(xiàn)在用的TI的TLV3501做的50HZ工頻信號的過零比較,在過零點多次觸發(fā)的情況,我也嘗試加濾波跟遲滯,都有效果,但是帶來相位的偏移,我要求是相位的偏移量不能高于1US,請問各位
    發(fā)表于 09-19 07:37

    用了webench設(shè)計低通濾波器之后發(fā)現(xiàn)經(jīng)過濾波之后出現(xiàn)相位的滯后,如何消除這個相位延遲呢?

    在用了webench設(shè)計低通濾波器之后發(fā)現(xiàn)經(jīng)過濾波之后出現(xiàn)相位的滯后,請問一下該怎么做才能消除這個相位延遲呢,希望得到解答,謝謝?。?!
    發(fā)表于 08-28 07:02

    晶振的抖動帶來哪些影響

    晶振的抖動是時鐘信號穩(wěn)定性和準(zhǔn)確性的重要影響因素,它可能由多種因素引起,如溫度變化、電磁干擾、電源噪聲、器件老化等。晶振的抖動不僅影響系統(tǒng)的時序性能,還可能對數(shù)據(jù)傳輸、信號處理和系統(tǒng)穩(wěn)定性等多個方面產(chǎn)生深遠(yuǎn)影響。
    的頭像 發(fā)表于 08-19 18:02 ?724次閱讀

    使用VCA810做AGC電路時,輸出隨頻率變化為什么?

    我在使用VCA810做AGC電路時遇到了一些問題,電路如圖,問題主要是輸出隨頻率變化,在同一頻率下,改變輸入賦值,輸出賦值可以穩(wěn)定,但改變頻率的話,輸出幅值就會改變,我測
    發(fā)表于 08-08 06:32

    esp32-lyrat接DuerOS對話功能之后,是否還可以進(jìn)行錄音?

    想問一下,esp32-lyrat 接入 DuerOS 對話功能之后,還是否可以進(jìn)行錄音? 也就是,想要問一下,加入DuerOS是否會將esp32-lyrat開發(fā)板的錄音功能全程占用? 有無解決辦法?
    發(fā)表于 06-28 16:30

    mqtt連接aws成功之后,過了十來分鐘,連接失敗,為什么?

    mqtt連接aws成功之后,過了十來分鐘,連接失敗,并自動連接,我不知道要不要解決bug?
    發(fā)表于 06-20 06:05

    扎心靈魂小拷問:AI編寫代碼之后,軟件工程師會被AI取代嗎?

    軟件開發(fā)者們很多讓他們焦慮的事情。他們最擔(dān)心的不再是如何用他們最喜歡的編程語言(C、C++、Erlang、Java等)表達(dá)最新的算法。相反,這種擔(dān)憂正逐漸被人工智能(AI)所取代。 在這里,我們將探討AI編寫代碼的過程,并回答這個問題:AI取代程序員嗎?
    的頭像 發(fā)表于 05-24 19:17 ?727次閱讀
    扎心靈魂小拷問:<b class='flag-5'>有</b><b class='flag-5'>了</b>AI編寫代碼<b class='flag-5'>之后</b>,軟件工程師會被AI取代嗎?

    控件值改變觸發(fā)事件問題

    項目中構(gòu)建了一個串口收發(fā)器,只要發(fā)送數(shù)據(jù)值(信號量)改變時,觸發(fā)串口發(fā)送數(shù)據(jù)事件,隨著數(shù)據(jù)的發(fā)出,也會有數(shù)據(jù)接收,接收數(shù)據(jù)的變化,又會觸發(fā)一個接收事件,在事件中會對接受數(shù)據(jù)進(jìn)行處理?,F(xiàn)在
    發(fā)表于 05-21 12:26

    stm32的中斷優(yōu)先級分組之后還能改分組嗎?

    如標(biāo)題所示,stm32的中斷優(yōu)先級分組之后還能改分組嗎? 比如我要使用外部中斷EXIT2,3,我在配置的時候配置優(yōu)先級分組2組,然后配置EXIT2,3,如果我下面又想開外部中斷
    發(fā)表于 05-13 08:40

    Stm32H7 spi帶來更大的adc噪聲,導(dǎo)致小信號異常值的原因?

    [Stm32H7]spi帶來更大的adc噪聲,導(dǎo)致小信號異常值
    發(fā)表于 03-25 06:10

    改變異步電動機(jī)的轉(zhuǎn)速幾種方法

    改變異步電動機(jī)的轉(zhuǎn)速幾種方法? 改變異步電動機(jī)的轉(zhuǎn)速可以通過以下幾種方法實現(xiàn):調(diào)節(jié)輸入電壓、改變動態(tài)電阻、更換極數(shù)、調(diào)整定子電阻、調(diào)整轉(zhuǎn)子電阻和
    的頭像 發(fā)表于 02-20 11:43 ?1669次閱讀