商湯3D人體實時追蹤技術(shù)在手機行業(yè)首次應(yīng)用

作為一部專為時尚人群打造的AI拍攝神器，OPPO R17 Pro最受人矚目的莫過于其對ToF 3D技術(shù)的商用，通過三顆攝像頭的精準定位，為用戶帶來包括體感游戲、AR尺子在內(nèi)的多項新功能。

特別是其利用“3D人體實時追蹤”技術(shù)結(jié)合游戲內(nèi)容所開發(fā)的體感游戲，以新穎的體驗廣受業(yè)內(nèi)和消費者關(guān)注，這項創(chuàng)新的背后正是由商湯科技的SensePosture3D人體骨架檢測算法提供支持。

基于精準的實時捕捉，商湯SensePosture3D人體骨架檢測算法能在小小的手機中實現(xiàn)人體骨架跟隨，進一步提升移動娛樂的沉浸式體驗。這不僅是商湯3D人體實時追蹤技術(shù)在手機行業(yè)的首次應(yīng)用，也是商湯探索手機娛樂新交互方式的再一次領(lǐng)先。

人體骨架檢測實時精準捕捉每個動作

此次R17 Pro體感游戲所搭載的“3D人體實時追蹤”技術(shù)，突破性地將商湯成熟的人臉關(guān)鍵點技術(shù)拓展到人體，實現(xiàn)對于動態(tài)場景下人體骨架關(guān)鍵點的實時跟蹤。

當用戶使用R17 Pro玩體感游戲時，將手機連接至電視或PC端屏幕，借助后置ToF深度攝像頭定位并追蹤人體骨架關(guān)鍵點，人體于物理空間的運動姿態(tài)、深度信息即被輸入進屏幕形成三維空間中的運動軌跡，實現(xiàn)人體操控游戲，與游戲場景精準對接。

圖片來源：ColorOS官方社區(qū)

基于“3D人體實時追蹤”技術(shù)的游戲體驗，右下角的人像剪影圖是利用TOF深度信息的輸入結(jié)合人體分析技術(shù)，捕捉人的動作變化并進行實時跟蹤。

基于“3D人體實時追蹤”技術(shù)的游戲體驗

這是商湯科技獨創(chuàng)的3D人體實時追蹤技術(shù)于行業(yè)內(nèi)的首發(fā)，這一效果的實現(xiàn)，得益于商湯AI算法與R17 Pro上后置ToF硬件的完美結(jié)合。

無獨有偶，在OPPO此前發(fā)布的旗艦產(chǎn)品Find X上，商湯同樣實現(xiàn)了人臉3D重建算法與前置3D結(jié)構(gòu)光技術(shù)的完美融合，從而帶來手機3D美顏的震撼效果。當3D感測越來越成為手機標配時，商湯不斷突破了其在實際應(yīng)用落地上的場景想象。

手機娛樂下一站 體感游戲交互升級

很多人可能還記得早年微軟通過Kinect組件在主機游戲上實現(xiàn)了人體捕捉技術(shù)，讓外界體會到體感游戲的樂趣，吸引了玩家熱烈追捧。如今，隨著智能手機逐步成為現(xiàn)代社會不可或缺的必需品，在手機上實現(xiàn)精準的3D人體實時追蹤算法，或許將成為體感游戲的爆發(fā)增長點。

相較于只能固定在客廳中的家庭體感設(shè)備，智能手機具備諸多優(yōu)勢，首先它擁有極佳的便攜性，塞入口袋就能隨身帶走；其次，智能手機已經(jīng)具備出色的硬件基礎(chǔ)，諸如ToF與3D結(jié)構(gòu)光，令手機的功能實現(xiàn)更具可探索性。

此次，商湯科技和OPPO R17 Pro技術(shù)與產(chǎn)品的融合就是業(yè)內(nèi)一個極佳的范本，在ToF模組上運行商湯3D人體實時追蹤算法，R17 Pro即能識別玩家動作，突破傳統(tǒng)體感游戲的場景局限，不僅帶給玩家全新的游戲體驗，更是意味著一個更具科技感的游戲交互方式的到來。

體感游戲之外，商湯SensePosture3D人體骨架檢測技術(shù)還將拓展更豐富的應(yīng)用場景，賦予更多互動性延伸。