0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

VR拯救3D音效說是伯樂也不為過

454398 ? 來源:網(wǎng)絡(luò)整理 ? 作者:工程師1 ? 2018-05-22 14:39 ? 次閱讀

VR受到無數(shù)追捧,隨著自身技術(shù)的發(fā)展,帶動了一批產(chǎn)業(yè)的升級換代3D音效正是其中的一員。在開發(fā)者對游戲畫面、內(nèi)容多年來越發(fā)精益求精的發(fā)展下,游戲的VR化,終于迎來了游戲音樂的春天。Waves Audio發(fā)明帶有頭部追蹤器的Waves Nx耳機實現(xiàn)3D空間音效;谷歌的開源項目Omnitone,為網(wǎng)頁VR提供真實的音頻系統(tǒng)。3D音效,在音樂發(fā)燒友的世界之外,獲得了更多行業(yè)的關(guān)注和投資。不過,這個通過音效讓人身臨其境,仿佛與表演者身處同一個空間的3D音效,和所有人以為的“現(xiàn)代”、“前沿”不同的是,它的開發(fā)有著上百年歷史。

3D音效:人頭錄音

3D音效的目的就是讓你完全置身于現(xiàn)實聲音的原始環(huán)境中,你能感到鳥從頭頂飛過,左邊有耳語,右邊有街頭表演,感受到聲音的位置,在腦海中浮現(xiàn)出真實的畫面。

傳統(tǒng)上,錄音被分為單聲道(Mono)和雙聲道(Stereo)兩種,區(qū)別在于捕捉聲音的傳聲器的數(shù)量。在雙聲道錄音的基礎(chǔ)上,人們改進發(fā)明了立體聲錄音(人頭錄音),在仿真頭的兩側(cè),放置兩個人耳形狀的傳聲器。人腦定位聲音位置基本依靠三個要素:耳朵的形狀、聽到聲音的時間差和聲音對兩耳的產(chǎn)生的不同的壓力。因為仿真耳朵在外形和密度上都離去還原人耳,所以這類的傳聲器能和人耳一樣地捕捉和傳輸聲音,保持左右耳間的差別。

3D音效的歷史

人頭錄音的歷史可以追溯到19世紀(jì)末期,法國的工程師Clement Ader。1881年,Ader開發(fā)出了電話戲?。═heatrophone),一種通過電話服務(wù)轉(zhuǎn)播的巴黎戲劇表演,一套套的麥克風(fēng)從舞臺的左邊一路排到右邊,信號通過電話輸,聽眾只需要一副接收器,就可以在巴黎工業(yè)宮中的包廂中聽?wèi)颉?/p>

1933年,AT&T的貝爾實驗室在芝加哥博覽會上展出了雙耳立體聲,帶來了一個在雙頰耳前安裝了麥克風(fēng)傳輸器的機械仿真人奧斯卡。奧斯卡在玻璃房間中捕捉聲音,而外面的訪客可以聽到和它一樣的聲音。AT&T的這項技術(shù),由Ader的發(fā)明改進而來,不過兩者的音質(zhì)都沒有什么本質(zhì)的提升。

經(jīng)歷二戰(zhàn),3D音效依舊過不去高音質(zhì)這道坎,直到1973年,一個德國麥克風(fēng)公司Neumann生產(chǎn)了革命性的KU-80,也是后來的人頭錄音設(shè)備的原型:一個仿真頭,左右兩邊各有一個傳輸器,并極大提升了對聲音位置的捕捉的靈敏度。同時,人頭錄音也找到了自己適合的領(lǐng)域,這項技術(shù)在廣播、實驗音樂上都得到了大力發(fā)展。搖滾主唱們,如Lou Reed,Thom Yorke,Imogen Heap等都進行了人頭錄音的實驗。

上世紀(jì)90年代末,一個叫Aureal的公司發(fā)布了A3D技術(shù)。Aureal的技術(shù)能利用電腦本身的兩個臺式的音箱,不外接音箱的情況下,制造出3D音效,通過A3D,你能夠清楚地辨別聲音前后左右和上下的位置。A3D是聲學(xué)工程師們根據(jù)3D音效的原理建立了一套數(shù)字模型算法,稱之為頭相關(guān)變換函數(shù)(Head-related Transfer Function, HRTF)。在精確的HRTF值下,體驗者不僅能夠感受到聲音的方向,并能確切地感受到不同聲音來源的遠(yuǎn)近,并隨著自己的移動而感受到和聲音源距離的變化。理論上來說,個體差異導(dǎo)致每個人的HRTF值都不相同,不過,人類的大腦有著很強的適應(yīng)能力,雖然你在一開始使用別人的HRTF數(shù)值時,可能產(chǎn)生聲音定位困難,但是當(dāng)你習(xí)慣以后,人腦就會自動學(xué)習(xí),并主動進行適配。

不過,由于Aureal和對手公司Creative的惡性競爭,一場劣幣驅(qū)逐良幣的商業(yè)之戰(zhàn)下,歷經(jīng)在大量官司的重創(chuàng)Aureal最終因無力經(jīng)營而倒閉。

VR,3D音效的伯樂

經(jīng)歷一個世紀(jì)的發(fā)展,3D音效的技術(shù)再次獲得了科技界的青睞,不論是VR設(shè)備還是VR游戲、視頻資源,3D音效都作為VR系統(tǒng)的一個部分,youtube在4月推出的VR直播,就增加了立體聲錄音。

3D音效提供了一個擴展版的虛擬現(xiàn)實,它幫助了很多游戲和設(shè)備在視覺上的局限,完整了360°無死角的體驗感受,沒有聲音的執(zhí)導(dǎo),人的視覺可能不受畫面控制,而仿真的3D聽覺的加入,能夠很好地控制人的大腦,吸引用戶的注意力。

樂隊U2,Kanye West的音樂制作人Chris Milk,在過去的機場大型音樂會上,采用了3D音效。一個擁有8個耳朵的全方位立體聲頭,4對3Dio雙耳麥克風(fēng),保證覆蓋每個90°的空間,在VR設(shè)備下,保正觀眾的聽覺和視覺的統(tǒng)一。在阿波羅工作室的Jean-Pascal Beaudoin看來,沒有3D音效的VR體驗是非常容易失敗的:當(dāng)你的大腦定位到聲音來自左邊時,它會預(yù)判當(dāng)你左轉(zhuǎn)90°后,聲音的來源應(yīng)該在你的正前方,而如果此時,聲音依舊在你的左邊,那么大腦就會將你從剛才的沉浸式體驗中抽離出來。

不過,3D音效在VR內(nèi)容中占的比重依舊不高,不論是電影還是游戲,音效常常是最后一個被考慮到的因素,VR不論是作為媒介還是內(nèi)容,從設(shè)計伊始就考慮到內(nèi)置人頭錄音,才能讓讓3D音效獲得最大化的充分利用。

普倫斯頓大學(xué)機械與航空工程教授Edgar Choueiri,領(lǐng)銜3D音效和應(yīng)用聲學(xué)實驗室數(shù)十年,在自己位于紐約上東區(qū)的家中,以一個世紀(jì)前的理論為基礎(chǔ),復(fù)原并優(yōu)化了一套完整的雙聲道錄音系統(tǒng):BACCH SP,一個讓每對音響都保留聲音提示的過濾器,并以此創(chuàng)造出3D音效。Jawbone采用普林斯頓大學(xué)的這個算法,為無線藍牙音響jambox制造過濾器,創(chuàng)造3D音效。運用同一套算法的App,BACCH-dSP,在頭部追蹤器的配合下,能夠定位聽者的頭部動作,更精確地創(chuàng)造出3D音效的環(huán)境,軟件的OS版本也實現(xiàn)了3D音效在筆記本上的應(yīng)用。

VR對音效的高要求,被遺忘在歷史角落的3D音效終于再次復(fù)蘇,各家的VR設(shè)備都讓它不再是可有可無的佐餐小菜,而是沉浸式體驗成敗的關(guān)鍵

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 3D
    3D
    +關(guān)注

    關(guān)注

    9

    文章

    2900

    瀏覽量

    107737
  • vr
    vr
    +關(guān)注

    關(guān)注

    34

    文章

    9641

    瀏覽量

    150573
收藏 人收藏

    評論

    相關(guān)推薦

    TechWiz LCD 3D應(yīng)用:局部液晶配向

    我們所說的局部摩擦是指給液晶盒中不同區(qū)域(可自定義區(qū)域)進行不同的液晶配向,所以可以稱之為局部掩膜、局部配向等。TechWiz LCD 2D和TechWiz LCD 3D都可以對液晶盒設(shè)置局部摩擦
    發(fā)表于 01-03 08:58

    3D集成電路的結(jié)構(gòu)和優(yōu)勢

    3D 集成電路的優(yōu)勢有目共睹,因此現(xiàn)代芯片中使用了 3D 結(jié)構(gòu),以提供現(xiàn)代高速計算設(shè)備所需的特征密度和互連密度。隨著越來越多的設(shè)計集成了廣泛的功能,并需要一系列不同的特征,3D 集成
    的頭像 發(fā)表于 12-03 16:39 ?900次閱讀
    <b class='flag-5'>3D</b>集成電路的結(jié)構(gòu)和優(yōu)勢

    發(fā)掘3D文件格式的無限潛力:打造沉浸式虛擬世界

    在當(dāng)今數(shù)字化時代,3D技術(shù)的應(yīng)用范圍日益廣泛,涵蓋電影后期制作、產(chǎn)品原型設(shè)計、虛擬現(xiàn)實(VR)、增強現(xiàn)實(AR)、游戲等眾多領(lǐng)域。而3D文件格式作為3D技術(shù)的核心組成部分,對于實現(xiàn)
    的頭像 發(fā)表于 09-26 18:14 ?1574次閱讀
    發(fā)掘<b class='flag-5'>3D</b>文件格式的無限潛力:打造沉浸式虛擬世界

    透明塑料件噴粉3D掃描CAV全尺寸檢測逆向3D建模設(shè)計服務(wù)-CASAIM

    3D建模
    中科院廣州電子
    發(fā)布于 :2024年08月30日 10:04:53

    安寶特產(chǎn)品 安寶特3D Analyzer:智能的3D CAD高級分析工具

    安寶特3D Analyzer包含多種實用的3D CAD高級分析工具,包括自動比對模型、碰撞檢測、間隙檢查、壁厚檢查,以及拔模和底切分析,能夠有效提升3D CAD模型檢測分析的效率,讓模型分析變得更簡單。
    的頭像 發(fā)表于 08-07 10:13 ?405次閱讀
    安寶特產(chǎn)品  安寶特<b class='flag-5'>3D</b> Analyzer:智能的<b class='flag-5'>3D</b> CAD高級分析工具

    3D封裝熱設(shè)計:挑戰(zhàn)與機遇并存

    隨著半導(dǎo)體技術(shù)的不斷發(fā)展,芯片封裝技術(shù)在持續(xù)進步。目前,2D封裝和3D封裝是兩種主流的封裝技術(shù)。這兩種封裝技術(shù)在散熱路徑和熱設(shè)計方面有著各自的特點和挑戰(zhàn)。本文將深入探討2D封裝和
    的頭像 發(fā)表于 07-25 09:46 ?1488次閱讀
    <b class='flag-5'>3D</b>封裝熱設(shè)計:挑戰(zhàn)與機遇并存

    廣東3D掃描鈑金件外觀尺寸測量3D偏差檢測對比解決方案CASAIM

    3D掃描
    中科院廣州電子
    發(fā)布于 :2024年07月22日 16:13:45

    裸眼3D筆記本電腦——先進的光場裸眼3D技術(shù)

    隨著科技的不斷進步,裸眼3D技術(shù)已經(jīng)不再是科幻電影中的幻想。如今,英倫科技裸眼3D筆記本電腦將這一前沿科技帶到了我們的日常生活中。無論你是專業(yè)的3D模型設(shè)計師,還是希望在視頻播放和模型展示中體驗逼真
    的頭像 發(fā)表于 07-16 10:04 ?608次閱讀

    3D建模的重要內(nèi)容和應(yīng)用

    和應(yīng)用。 1. 建筑設(shè)計與規(guī)劃 在建筑領(lǐng)域,3D建模被廣泛應(yīng)用于建筑設(shè)計和規(guī)劃過程中。建筑師可以利用3D建模軟件創(chuàng)建逼真的建筑物模型,幫助客戶更好地理解設(shè)計概念和空間布局,同時進行各種設(shè)計方案的可視化展示和分析。這不僅使得設(shè)計
    的頭像 發(fā)表于 06-21 14:48 ?708次閱讀

    VR虛擬空間中的3D 技術(shù)

    隨著科技的飛速發(fā)展,虛擬空間已成為元宇宙的重要呈現(xiàn)方式。從游戲到工業(yè)設(shè)計,從電子商務(wù)到文旅體驗,3D相關(guān)技術(shù)在虛擬空間中發(fā)揮著舉足輕重的作用,決定著用戶們能否真正能體會到VR的沉浸式體驗。 虛擬空間
    的頭像 發(fā)表于 04-29 09:36 ?1571次閱讀
    <b class='flag-5'>VR</b>虛擬空間中的<b class='flag-5'>3D</b> 技術(shù)

    ad19中3d模型不顯示?

    封裝庫導(dǎo)入3d模型不顯示,但導(dǎo)入3d模型后的封裝庫生成pcb文件時顯示3d模型,這是什么原因?qū)е碌摹?
    發(fā)表于 04-24 13:41

    頭盔3D掃描逆向工程3d建模抄數(shù)測繪服務(wù)-CASAIM中科廣電

    3D掃描
    中科院廣州電子
    發(fā)布于 :2024年04月12日 14:03:01

    Stability AI推出Stable Video 3D模型,可制作多視角3D視頻

    SV3D_u是Stable Video 3D的一個版本,僅需單幅圖片即可生成運動軌跡視頻,無須進行相機調(diào)整。擴充版本的SV3D_p加入了軌道視圖的特性,使其可以根據(jù)預(yù)設(shè)的相機路徑創(chuàng)建3D
    的頭像 發(fā)表于 03-21 14:57 ?1066次閱讀

    3D動畫原理:電阻

    電阻3D
    深圳崧皓電子
    發(fā)布于 :2024年03月19日 06:49:19

    裸眼3D頻頻“出圈” 電信積極布局并發(fā)力裸眼3D領(lǐng)域

    隨著科技的發(fā)展,現(xiàn)在3D視角已經(jīng)不是新鮮事。而現(xiàn)在,裸眼3D應(yīng)用則在頻頻“出圈”。特別是在5G的助力下,裸眼3D技術(shù)應(yīng)用更是成為科技圈一個熱點。
    的頭像 發(fā)表于 03-11 17:33 ?736次閱讀