移動體驗發(fā)展到今天,不滿足于移動設(shè)備帶來的娛樂需求,在永無止境的探索中,我們更加渴望參與其中。我們也曾身臨其境體驗過AR(增強現(xiàn)實)和VR(虛擬現(xiàn)實),但是你知道這些夢幻級的沉浸式體驗都是怎么做到的嗎?
實現(xiàn)非凡沉浸式體驗需同時聚焦以下三大維度:
首先是視覺上的考驗,由于 VR 眼鏡屏幕與我們的眼睛距離非常近,因此 VR 的視覺品質(zhì)需要屏幕像素能夠達(dá)到與真實世界無限接近的程度,從而做到“以假亂真”的真實感。高分辨率的屏幕同時也去除了“紗窗效應(yīng)”。
人類通過雙眼以 3D 形態(tài)觀察世界,這就需要立體顯示器為場景中的物體顯示適當(dāng)?shù)木吧睿瑥亩鴮崿F(xiàn)3D效果。人眼擁有接近 180° 的視場角(field of view,簡稱:FOV),而能清晰成像的面積也有將近120°,因此 VR 設(shè)備的 FOV 視角越接近這一數(shù)值,越能提供沉浸式的體驗。
視覺上的考驗還遠(yuǎn)不止如此,更加困難的是從人體運動到顯示屏刷新之間的延時問題,也就是 MTP(motion to photon,簡稱:MTP)延時。通過實驗,MTP 延時超過 20ms 將使沉浸式體驗顯著下降,同時用戶也會產(chǎn)生眩暈感。此外,顯示屏的刷新頻率越高,所要求的 MTP 延時越低,比如一塊 60Hz 的屏幕的合理延時需少于 17ms,而一塊 90Hz 的屏幕則需低于 11ms。
*紗窗效應(yīng)(screen door effect):即當(dāng)像素密度不足時畫面在人眼中產(chǎn)生虛影的現(xiàn)象,就像通過紗窗看外面的世界。
其次是聽覺上的配合,為了使視覺與聽覺得到完全同步,我們需要高分辨率音頻和3D環(huán)繞聲。高保真的音頻可以在采樣頻率和采樣位數(shù)上與人類聽力相匹配。
除此之外,因為我們處于三維空間當(dāng)中,聲音是3D形態(tài)的。同樣在VR場景中,3D音頻也必不可少,逼真的3D定位音頻可以在頭部轉(zhuǎn)動時動態(tài)調(diào)整3D環(huán)繞聲。這就意味著我們可以在虛擬現(xiàn)實環(huán)境中,通過聲音來辨別聲源方向和距離,做到與真實生活別無二致。
最后是交互的挑戰(zhàn),直觀交互實際上是人類的第二本能,沒有什么比轉(zhuǎn)動頭部環(huán)顧四周更自然的方式了。而驍龍移動平臺中的 Hexagon DSP 運行的視覺慣性測距算法,能夠計算出我們在虛擬或現(xiàn)實世界中的位置,并提供一個擁有六自由度(6-DOF)的頭部姿勢。依賴于認(rèn)知技術(shù),我們還可以使用手勢或語音,在圖形界面進行控制。
*六自由度(6-DOF)精準(zhǔn)運動跟蹤不僅可以實現(xiàn)上下左右的基本模擬,還可以在不斷變化的虛擬現(xiàn)實環(huán)境中,實現(xiàn)前進和后退。
受益于近年來的積極發(fā)展,虛擬現(xiàn)實已經(jīng)擺脫了早期笨重的有線頭戴式顯示器與控制器。驍龍移動平臺采用系統(tǒng)性解決方案和基于 SoC 的定制設(shè)計專業(yè)引擎,提供經(jīng)過終端到終端優(yōu)化后的高效異構(gòu)運算解決方案,將 VR 變成現(xiàn)實。
評論
查看更多