車(chē)載手勢(shì)交互研究的六種技術(shù)路線(xiàn)

佐思汽研發(fā)布《2022-2023年中國(guó)汽車(chē)手勢(shì)交互發(fā)展研究報(bào)告》，從手勢(shì)交互技術(shù)、標(biāo)桿車(chē)型手勢(shì)交互方案、手勢(shì)交互產(chǎn)業(yè)鏈以及手勢(shì)交互方案商四個(gè)方面進(jìn)行分析研究。

一、2022年車(chē)載手勢(shì)識(shí)別功能裝配量同比增長(zhǎng)315.6%

隨著智能座艙技術(shù)的迭代升級(jí)，座艙服務(wù)從被動(dòng)智能逐漸演變?yōu)橹鲃?dòng)智能，人機(jī)交互模式從單一模態(tài)的交互方式轉(zhuǎn)向多模態(tài)交互。在這一趨勢(shì)影響下，車(chē)載手勢(shì)交互功能得到了快速的發(fā)展。2022年，中國(guó)乘用車(chē)手勢(shì)識(shí)別（標(biāo)配）裝配量總計(jì)42.7萬(wàn)輛，同比增長(zhǎng)315.6%；裝配率為2.1%，較2021年增加了1.6個(gè)百分點(diǎn)。

二、手勢(shì)識(shí)別控制范圍正從軟件向硬件、從車(chē)內(nèi)向車(chē)外延伸

隨著手勢(shì)交互技術(shù)的普及和應(yīng)用場(chǎng)景的不斷擴(kuò)大，車(chē)載手勢(shì)交互技術(shù)也得到了迅速發(fā)展。目前，汽車(chē)制造商正積極推動(dòng)座艙交互功能的布局，手勢(shì)交互技術(shù)從最初控制車(chē)內(nèi)信息娛樂(lè)系統(tǒng)，包括接掛電話(huà)、調(diào)整音量、控制導(dǎo)航等功能，發(fā)展到可控制車(chē)身硬件以及安全系統(tǒng)，如車(chē)窗/天窗/遮陽(yáng)簾開(kāi)啟或關(guān)閉、關(guān)閉車(chē)門(mén)、車(chē)輛行駛等功能。 此外，車(chē)外手勢(shì)控制也是各大廠(chǎng)商積極拓展的技術(shù)領(lǐng)域。例如，WEY摩卡已經(jīng)實(shí)現(xiàn)了駕駛員可以在車(chē)外通過(guò)手勢(shì)控制車(chē)輛點(diǎn)火、前進(jìn)、后退、暫停、熄火操作。未來(lái)，手勢(shì)識(shí)別功能將不再局限于駕乘人員，而會(huì)逐步實(shí)現(xiàn)對(duì)車(chē)外路人的動(dòng)作識(shí)別，例如識(shí)別路上交警的指揮手勢(shì)或汽車(chē)周?chē)T車(chē)人做出的手勢(shì)。

數(shù)據(jù)堂自制版權(quán)的系列數(shù)據(jù)集產(chǎn)品為“手勢(shì)識(shí)別”這一技術(shù)路徑的實(shí)現(xiàn)提供了強(qiáng)有力的支持。

1314,178張18種手勢(shì)識(shí)別數(shù)據(jù)

314,178張18種手勢(shì)識(shí)別數(shù)據(jù)涵蓋多種場(chǎng)景、18種手勢(shì)、5種拍攝角度、多年齡段、多種光照條件。在標(biāo)注方面，標(biāo)注21關(guān)鍵點(diǎn)（每個(gè)關(guān)鍵點(diǎn)有可見(jiàn)不可見(jiàn)屬性）、手勢(shì)類(lèi)別和手勢(shì)屬性。314,178張18種手勢(shì)識(shí)別數(shù)據(jù)可用于手勢(shì)識(shí)別、人機(jī)交互等任務(wù)。

三、手勢(shì)識(shí)別六種技術(shù)路線(xiàn)

從技術(shù)路線(xiàn)來(lái)看，手勢(shì)識(shí)別技術(shù)主要包括基于3D攝像頭的結(jié)構(gòu)光、ToF、雙目成像，基于雷達(dá)的毫米波、超聲波，以及基于生物電的肌電技術(shù)。

手勢(shì)識(shí)別技術(shù)路線(xiàn)

來(lái)源：佐思汽研《2022-2023年中國(guó)汽車(chē)手勢(shì)交互發(fā)展研究報(bào)告》

目前，基于3D攝像頭的手勢(shì)感應(yīng)技術(shù)路線(xiàn)是車(chē)載手勢(shì)識(shí)別的主流技術(shù)路線(xiàn)。該技術(shù)路線(xiàn)由3D攝像頭和控制單元組成。3D攝像頭包括攝像頭、紅外LED、傳感器等部分，用于捕捉手部動(dòng)作，然后利用相應(yīng)的圖像處理算法識(shí)別手勢(shì)的類(lèi)型，并下達(dá)相關(guān)指令。基于3D攝像頭的技術(shù)路線(xiàn)可細(xì)分為結(jié)構(gòu)光、ToF和雙目視覺(jué)。

結(jié)構(gòu)光技術(shù)

結(jié)構(gòu)光技術(shù)是將帶有編碼信息的光投射到人體，由紅外傳感器采集反射結(jié)構(gòu)圖案，最后由處理芯片構(gòu)建3D模型的方案，適用于10米以?xún)?nèi)的近距場(chǎng)景，擁有硬件成熟、可識(shí)別精度高、分辨率高等優(yōu)勢(shì)。于2022年7月上市的哪吒S搭載的手勢(shì)識(shí)別方案即為結(jié)構(gòu)光方案。

哪吒S艙內(nèi)手勢(shì)識(shí)別傳感器位于內(nèi)后視鏡上方，可識(shí)別6個(gè)手勢(shì)動(dòng)作，包括：手掌前后移動(dòng)調(diào)節(jié)天幕透光率、比“噓”靜音、手指順/逆時(shí)針調(diào)整音量、手掌張開(kāi)左右移動(dòng)切換音視頻節(jié)目、比“V”車(chē)內(nèi)自拍以及點(diǎn)贊收藏節(jié)目。

ToF技術(shù)

ToF技術(shù)即根據(jù)光的飛行時(shí)間測(cè)距，由底層感光元件構(gòu)建3D圖像實(shí)現(xiàn)，其可以獲得5米內(nèi)的有效與實(shí)時(shí)深度信息，適用場(chǎng)景更廣，無(wú)論環(huán)境光較強(qiáng)（如：日光）或較弱，都可獲得有效的景深信息。寶馬iX、理想L9、極狐阿爾法S全新HI版等量產(chǎn)車(chē)型搭載的手勢(shì)識(shí)別方案均為T(mén)oF方案。

寶馬iX艙內(nèi)手勢(shì)識(shí)別傳感器位于中控屏上方車(chē)頂燈處，可識(shí)別8個(gè)手勢(shì)動(dòng)作，包括： ① 手左右揮動(dòng)拒接電話(huà)/忽略提示；

② 食指前后接聽(tīng)電話(huà)/確認(rèn)提示；

③ 順時(shí)針旋轉(zhuǎn)可增大音量或放大導(dǎo)航地圖；

④ 逆時(shí)針旋轉(zhuǎn)可減小音量或縮小導(dǎo)航地圖；

⑤ 手握拳伸出大拇指向左右揮動(dòng)，調(diào)整上一曲/下一曲；

⑥ 兩手指指向顯示器可自定義；

⑦ 做出五-零-五手勢(shì)（自定義）；

⑧ 手握空拳，食指與大拇指相碰，左右揮動(dòng)拉扯可查看車(chē)輛四周影像（需要車(chē)輛帶自動(dòng)泊車(chē)輔助系統(tǒng)PLUS）。

理想L9為保證駕乘人員均可實(shí)現(xiàn)手勢(shì)識(shí)別控制，在車(chē)內(nèi)前艙及后艙分別安裝了手勢(shì)識(shí)別傳感器。前艙傳感器位于內(nèi)后視鏡上方，后艙傳感器則位于后排娛樂(lè)屏處上方。

前艙可識(shí)別2個(gè)手勢(shì)動(dòng)作，包括： ① 控制車(chē)窗/天窗/遮陽(yáng)簾（結(jié)合語(yǔ)音交互）；

② 播放頁(yè)面長(zhǎng)握拳，上下移動(dòng)調(diào)整音量。

后艙可識(shí)別7個(gè)手勢(shì)動(dòng)作，包括： ① 五指張開(kāi)內(nèi)側(cè)手肘放置于扶手保持2秒，可進(jìn)行手勢(shì)定位；

② 五指張開(kāi)，向下?lián)]手打開(kāi)屏幕；

③ 五指張開(kāi)，手掌移動(dòng)光標(biāo)；

④ 握拳抓取圖標(biāo)；

⑤ 長(zhǎng)握拳，抓取并移動(dòng)實(shí)現(xiàn)畫(huà)面甩屏；

⑥ 在播放頁(yè)面，長(zhǎng)握拳，左右移動(dòng)可調(diào)節(jié)播放進(jìn)度；

⑦ 在播放頁(yè)面，五指張開(kāi)，向上揮手可退出當(dāng)前內(nèi)容。

雙目立體成像技術(shù)

雙目立體成像技術(shù)基于視差原理，由多幅圖像獲取物體三維幾何信息實(shí)現(xiàn)。該技術(shù)對(duì)硬件要求低，無(wú)需額外的特殊設(shè)備，是一種性?xún)r(jià)比高的方案。于2022年5月上市的奔馳EQS搭載的手勢(shì)識(shí)別方案即為雙目立體成像方案。

奔馳EQS艙內(nèi)手勢(shì)識(shí)別傳感器位于車(chē)頂閱讀燈處，可識(shí)別3個(gè)手勢(shì)動(dòng)作，包括： ① 比“V”調(diào)出收藏夾；

② 在內(nèi)后視鏡下方前/后揮手，控制天窗關(guān)/開(kāi)；

③ 手向車(chē)內(nèi)揮動(dòng)，自動(dòng)關(guān)門(mén)（需選配四門(mén)電動(dòng)開(kāi)閉）。

目前，基于雷達(dá)的毫米波、超聲波以及基于生物電的肌電等手勢(shì)識(shí)別技術(shù)，在汽車(chē)艙內(nèi)手勢(shì)識(shí)別功能中尚未被廣泛應(yīng)用。與傳統(tǒng)的視覺(jué)手勢(shì)識(shí)別技術(shù)相比，這些技術(shù)仍然存在一些限制和挑戰(zhàn)。

毫米波雷達(dá)

毫米波雷達(dá)是一種無(wú)線(xiàn)電波傳感器，即使在有障礙物的情況下，也能準(zhǔn)確探測(cè)手的位置和運(yùn)動(dòng)。 2020年，木牛科技美國(guó)子公司Ainstein，與美國(guó)ADAC Automotive成立合資品牌RADAC，并在CES展上正式發(fā)布了基于毫米波雷達(dá)的車(chē)載手勢(shì)識(shí)別解決方案。該方案中的手勢(shì)識(shí)別傳感器位于尾門(mén)上方，可通過(guò)手部的左右揮動(dòng)打開(kāi)車(chē)門(mén)。

超聲波雷達(dá)

2020年2月，DS在日內(nèi)瓦車(chē)展上推出的Aero Sport Lounge概念車(chē)，集成了Leap Motion體感控制技術(shù)和Ultrahaptics超聲波觸覺(jué)反饋技術(shù)，可輕松識(shí)別、解讀駕乘者的每個(gè)手勢(shì)動(dòng)作，并通過(guò)微型揚(yáng)聲器發(fā)出的立體超聲波予以駕乘者觸覺(jué)反饋。

DS Aero Sport Lounge艙內(nèi)手勢(shì)識(shí)別以及超聲波反饋傳感器位于車(chē)內(nèi)中央扶手處，可識(shí)別5個(gè)手勢(shì)動(dòng)作，包括： ① 艙內(nèi)溫度和吹風(fēng)速度調(diào)節(jié)； ② 曲目以及音量調(diào)節(jié)； ③ 處理導(dǎo)航/地圖，包括設(shè)置新路線(xiàn)； ④ 接聽(tīng)/拒絕電話(huà)；

⑤ 菜單功能切換。

DS Aero Sport Lounge手勢(shì)識(shí)別傳感器位置圖

生物電

生物電是指人體肌肉運(yùn)動(dòng)產(chǎn)生的電信號(hào)。生物電傳感器可以通過(guò)測(cè)量這些電信號(hào)來(lái)識(shí)別手勢(shì)與動(dòng)作。目前，基于生物電的肌電手勢(shì)識(shí)別技術(shù)更多應(yīng)用于控制外部設(shè)備和交互界面，例如控制假肢、虛擬現(xiàn)實(shí)和游戲設(shè)備等方面。致力于研發(fā)智能手勢(shì)控制產(chǎn)品的加拿大公司Thalmic Labs，推出的首款可穿戴設(shè)備MYO腕帶采用的就是肌電技術(shù)。該腕帶內(nèi)嵌8個(gè)肌電傳感器記錄手臂肌肉的電信號(hào)，通過(guò)分析這些信號(hào)識(shí)別不同的手勢(shì)。在實(shí)際應(yīng)用過(guò)程中，用戶(hù)可以通過(guò)MYO腕帶的藍(lán)牙連接來(lái)控制無(wú)人機(jī)、電腦、智能手機(jī)等電子設(shè)備。目前尚無(wú)車(chē)內(nèi)應(yīng)用案例。

審核編輯黃宇