3D視覺(jué)正在成為計(jì)算機(jī)視覺(jué)的下一個(gè)爆發(fā)的賽道

The Inquirer網(wǎng)站稱，蘋果iOS 12系統(tǒng)將支持橫向Face ID解鎖，而2018年秋季新品發(fā)布會(huì)發(fā)布的三款iPhone手機(jī)，也都將支持Face ID解鎖。蘋果引領(lǐng)了3D視覺(jué)+AI的潮流，曠視對(duì)標(biāo)蘋果，整合技術(shù)、構(gòu)建完整產(chǎn)業(yè)鏈，發(fā)布“軟硬一體”的移動(dòng)端3D感知全棧解決方案。

曠視要對(duì)標(biāo)蘋果。

2018年，3D視覺(jué)成為CV界最新最火的賽道之一，以蘋果Face ID引領(lǐng)的“刷臉”風(fēng)潮，落腳到中國(guó)，就成為安卓智能手機(jī)廠商的博弈，華為、OPPO、vivo等都先后啟用了3D視覺(jué)功能。

作為其背后3D視覺(jué)技術(shù)或者說(shuō)解決方案的提供商，幾家CV頭部公司之間的競(jìng)爭(zhēng)又變得激烈而且直接起來(lái)。

智能手機(jī)廠商作為甲方，有意讓各家3D視覺(jué)技術(shù)提供商彼此競(jìng)爭(zhēng)，然后擇勝者為合作方。

但無(wú)論是手機(jī)廠商還是3D視覺(jué)技術(shù)提供商，他們前面都橫著一個(gè)共同的敵人——蘋果。

據(jù)The Inquirer爆料，蘋果2018年的“iPhone”將采用與首次應(yīng)用在iPhone X上的Face ID技術(shù)，三款不同尺寸的iPhone手機(jī)均支持Face ID解鎖，而傳說(shuō)中的iPhone X Plus將擁有“第二代”3D掃描技術(shù)。

同時(shí)，蘋果iOS 12系統(tǒng)將對(duì)Face ID升級(jí)，支持橫向Face ID解鎖。

Face ID的應(yīng)用有利于Apple服務(wù)和生態(tài)系統(tǒng)的推廣，更為重要的是，以Face ID為代表的人臉解鎖技術(shù)將繼續(xù)引爆3D視覺(jué)在手機(jī)端的應(yīng)用，并開(kāi)拓安全支付、3D美顏、3D整形等廣闊場(chǎng)景，讓3D為手機(jī)帶來(lái)的更多能力。

賽道前方風(fēng)景無(wú)限美好，但玩家眾多。與蘋果并存的安卓陣營(yíng)中，曠視等靠CV起家廠商在整合技術(shù)、構(gòu)建完整產(chǎn)業(yè)鏈，試圖靠“AI+3D”實(shí)現(xiàn)跑馬圈地，落地多種場(chǎng)景。

2018年iPhone或全配置Face ID，安卓陣營(yíng)跟進(jìn)3D視覺(jué)+AI算法

2017年，蘋果iPhone X引領(lǐng)了安卓陣營(yíng)的幾個(gè)潮流：全面屏、AI芯片和人臉解鎖。其中，基于3D結(jié)構(gòu)光技術(shù)的Face ID 技術(shù)為人們帶來(lái)了強(qiáng)大的人臉識(shí)別解鎖和支付新應(yīng)用，成功開(kāi)啟AI與3D創(chuàng)新發(fā)展的新浪潮。

目前，F(xiàn)ace ID只能在垂直握住手機(jī)時(shí)完成識(shí)別，不支持水平解鎖。

The Inquirer網(wǎng)站稱，蘋果iOS 12系統(tǒng)將支持橫向Face ID解鎖，而2018年秋季新品發(fā)布會(huì)發(fā)布的三款iPhone手機(jī)，也都將支持Face ID解鎖。

另有消息稱，F(xiàn)ace ID的功能也將要在Mac電腦上運(yùn)行，當(dāng)Mac電腦處于睡眠模式時(shí)也能時(shí)刻完成刷臉要求。

Face ID采用的TrueDepth攝像機(jī)會(huì)在用戶的臉部投射多達(dá)3萬(wàn)個(gè)點(diǎn)來(lái)繪制3D圖像，蘋果的A11仿生芯片會(huì)對(duì)這些數(shù)據(jù)進(jìn)行處理，并使用機(jī)器學(xué)習(xí)進(jìn)行分析。隨著時(shí)間的推移，F(xiàn)ace ID會(huì)自主學(xué)習(xí)，對(duì)用戶面部做擴(kuò)充匹配，結(jié)果是戴眼鏡或改變發(fā)型之后，F(xiàn)ace ID仍然能夠準(zhǔn)確識(shí)別。

Face ID的應(yīng)用引領(lǐng)了3D視覺(jué)+AI算法結(jié)合的潮流。安卓陣營(yíng)里，OPPO、vivo、小米等國(guó)產(chǎn)手機(jī)廠商旗艦系列都在采用3D視覺(jué)技術(shù)。

一方面，F(xiàn)ace ID背后的3D視覺(jué)讓“刷臉”手機(jī)中的一種全新的交互方式，并讓安卓的“二維拍攝”得到進(jìn)步；另一方面，3D視覺(jué)開(kāi)拓出安全支付、AR游戲、虛擬試穿等應(yīng)用上，持續(xù)探尋3D能為手機(jī)帶來(lái)的更多能力。

以曠視為例，曠視2017年發(fā)力手機(jī)市場(chǎng)，隨后推出人臉支付、人臉識(shí)別解鎖、人像光效、人像背景虛化等一系列移動(dòng)端AI產(chǎn)品，應(yīng)用在人臉解鎖、圖像增強(qiáng)、視頻處理等方面。

對(duì)標(biāo)蘋果，曠視發(fā)布“軟硬一體”3D感知全棧解決方案

AI+3D視覺(jué)也是國(guó)內(nèi)計(jì)算機(jī)視覺(jué)的下一個(gè)爆發(fā)賽道。

最近，曠視首次發(fā)布“軟硬一體”的移動(dòng)端3D感知全棧解決方案，從算法創(chuàng)新、應(yīng)用開(kāi)發(fā)、設(shè)備制造到解決方案打造四個(gè)層面，闡釋曠視最新、最全面的“AI+3D”發(fā)展脈絡(luò)。

曠視科技云事業(yè)部高級(jí)副總裁吳文昊介紹，“手機(jī)3D視覺(jué)領(lǐng)域雖然已有多種類型的應(yīng)用案例出來(lái)，但該領(lǐng)域包含算法和模組的軟硬一體整體解決方案仍是缺位的，曠視科技正在嘗試一種從上往下的整合方案?！?/p>

曠視科技云事業(yè)部高級(jí)副總裁吳文昊

在曠視發(fā)布的軟硬一體移動(dòng)端智能3D產(chǎn)品解決方案中，最上面一層是3D應(yīng)用層，往下依次至AI算法、解決方案，最后到攝像、傳感等硬件設(shè)備制造上。

3D 應(yīng)用：目前在手機(jī)3D視覺(jué)能力開(kāi)發(fā)方面，曠視研發(fā)的3D人臉識(shí)別解鎖和3D人像光效應(yīng)用已經(jīng)實(shí)現(xiàn)了大規(guī)模的應(yīng)用，并且還在業(yè)內(nèi)開(kāi)發(fā)出全面可用的安全支付、3D 美顏、3D 整形等應(yīng)用。下一步，曠視將投入到AR游戲、虛擬試穿等應(yīng)用上，持續(xù)探尋3D能為手機(jī)帶來(lái)的更多能力。

3D 算法：在AI+3D的底層算法研發(fā)方面上，曠視專注于識(shí)別和重建兩個(gè)大類。識(shí)別即機(jī)器感知、理解世界的能力，也是曠視的強(qiáng)項(xiàng)所在，基于曠視自研的MegBrain深度學(xué)習(xí)引擎，曠視在人臉識(shí)別、人體識(shí)別、活體檢測(cè)、注意力檢測(cè)追蹤及其他圖像識(shí)別的算法層面擁有業(yè)界頂尖的技術(shù)實(shí)力。

重建即把識(shí)別出的物體進(jìn)行三維重建，是開(kāi)發(fā)針對(duì)人、針對(duì)物的3D視覺(jué)應(yīng)用核心所在，曠視目前已在人像3D建模、人體3D建模及物體幾何測(cè)量算法研發(fā)方面走在世界前列，并與Bellus 3D、Altizure等3D視覺(jué)企業(yè)開(kāi)展了聯(lián)合研發(fā)合作。

Altizure城市3D建模成果

解決方案：不同的應(yīng)用場(chǎng)景需要不同的3D視覺(jué)解決方案，曠視及合作伙伴根據(jù)不同應(yīng)用場(chǎng)景中對(duì)深度計(jì)算、深度修復(fù)、深度優(yōu)化、標(biāo)定、畸變校正等能力的需求，設(shè)計(jì)出基于雙攝、三攝、深攝的豐富解決方案，在整合結(jié)構(gòu)光、TOF、雙目等不同的攝像、傳感系統(tǒng)架構(gòu)上擁有成熟的應(yīng)用經(jīng)驗(yàn)。

硬件模組：移動(dòng)端3D產(chǎn)業(yè)鏈最下面一層是硬件制造，包含攝像頭、傳感器、芯片等硬件模組的研發(fā)。結(jié)構(gòu)光、TOF和雙目方案涉及到高清攝像頭、IR投射器、IR接收器、激光發(fā)光器等設(shè)備的搭配組合，曠視目前已經(jīng)與艾邁斯半導(dǎo)體等3D硬件模組廠商展開(kāi)合作，在業(yè)界率先建立起軟硬一體的3D視覺(jué)技術(shù)優(yōu)勢(shì)。

七成Top20國(guó)產(chǎn)手機(jī)使用曠視方案，3D+AI能出現(xiàn)殺手級(jí)應(yīng)用

OPPO最新旗艦手機(jī)Find X采用曠視科技Face++移動(dòng)端3D人臉識(shí)別解決方案，F(xiàn)ace++為提供了識(shí)別檢測(cè)、活體檢測(cè)和注意力檢測(cè)三個(gè)主要算法模型結(jié)構(gòu)，讓成為Find X安卓首款實(shí)現(xiàn)3D人臉支付的手機(jī)。

吳文昊透露，目前華為、OPPO、vivo、小米這些國(guó)內(nèi)廠商都在使用曠視的3D視覺(jué)產(chǎn)品，Top的20國(guó)產(chǎn)手機(jī)品牌中，曠視產(chǎn)品占到70%。

不過(guò)，在吳文昊看來(lái)，3D視覺(jué)現(xiàn)在處于軟硬分離的狀態(tài)，還缺少一個(gè)整合的角色。

曠視“軟硬一體”3D感知全棧解決方案的邏輯是，希望Face++能起到整合的角色，把軟件、硬件、算法、應(yīng)用統(tǒng)統(tǒng)整合在一起，只有整合者出現(xiàn)之后，整個(gè)3D落地才會(huì)大大加速。

至于未來(lái)3D視覺(jué)領(lǐng)域的殺手級(jí)應(yīng)用出現(xiàn)，吳文昊認(rèn)為有三個(gè)條件：

1、新的硬件形態(tài)。手機(jī)已經(jīng)陪伴我們10多年，將來(lái)會(huì)有新的消費(fèi)電子產(chǎn)品出現(xiàn)，吳文昊認(rèn)為，這樣的電子產(chǎn)品一定是以3D、AR為主要賣點(diǎn)的產(chǎn)品，并不遙遠(yuǎn)?！翱赡墁F(xiàn)在的想象力還想象不到，我認(rèn)為會(huì)慢慢會(huì)看到一些新形態(tài)突然之間起來(lái)，占領(lǐng)更多的碎片化時(shí)間?！?/p>

2、3D一定要跟智能化結(jié)合起來(lái)，AI+3D一定是非常大的殺手級(jí)應(yīng)用場(chǎng)景?，F(xiàn)在，像AI Camera拍張照片，機(jī)器識(shí)別理解藍(lán)天、草地，加上3D的物理信息，一定會(huì)做出非常好非?？岬呐恼招Ч珹I+3D一定是個(gè)方向。

3、隨時(shí)隨地的產(chǎn)品。從2014年移動(dòng)互聯(lián)網(wǎng)崛起，能夠隨時(shí)隨地把用戶所有碎片化時(shí)間和精力全部發(fā)揮出來(lái)，讓人們看到無(wú)數(shù)的場(chǎng)景。電商、O2O、共享，當(dāng)3D的變得無(wú)處不在，變得隨時(shí)隨地可以對(duì)真實(shí)世界進(jìn)行建模，這是非?？岬囊患虑椤?/p>

2018 CV界最大看點(diǎn)，誰(shuí)能笑傲3D視覺(jué)？

蘋果目前是3D視覺(jué)的絕對(duì)領(lǐng)導(dǎo)者，在3D視覺(jué)方面積累了豐厚的專利，在硬件配置上也舍得砸錢。

近年來(lái)，智能手機(jī)銷量放緩，任何技術(shù)上的革新都將成為推動(dòng)整個(gè)產(chǎn)業(yè)上升的動(dòng)力。從三星到華為再到小米，眼下業(yè)界都把最熾熱的目光放在了3D視覺(jué)上。

而作為3D視覺(jué)解決方案的提供商，各家也是鉚足了勁，因?yàn)樾睦锒嗌俣济靼祝罱K拼的就一個(gè)詞——速度。技術(shù)發(fā)展到最后總會(huì)趨同，因此看的就是誰(shuí)能更快地實(shí)現(xiàn)性價(jià)比更高的方案。

就跟芯片行業(yè)一樣，在3D視覺(jué)這個(gè)領(lǐng)域，技術(shù)最高或者說(shuō)解決方案最好的那幾家頭部公司，將占據(jù)絕大部分的市場(chǎng)。這并不是一個(gè)能靠低成本、低技術(shù)搶占份額的領(lǐng)域，雖然目前看來(lái)3D視覺(jué)的機(jī)會(huì)窗口仍然沒(méi)有關(guān)閉，但留給后來(lái)者的時(shí)間也不多了。

正因如此，蘋果才在業(yè)界如此受人仰望。更不用說(shuō)，蘋果早就想好了3D視覺(jué)做成后的一系列軟件應(yīng)用和開(kāi)發(fā)者生態(tài)，AR/VR也布局深遠(yuǎn)。

蘋果Face ID的兩家關(guān)鍵合作商，一個(gè)是Bellus 3D，其創(chuàng)始人 Eric Chen 曾是蘋果公司 Quicktime VR 項(xiàng)目的創(chuàng)建人之一，有30年3D研發(fā)的經(jīng)驗(yàn)，可以說(shuō)是首批做3D和VR的中國(guó)人。

Eric Chen

2015年，Eric Chen 創(chuàng)建Bellus3D，專注于為手機(jī)等移動(dòng)設(shè)備提供高解析度的3D人臉掃描、建模技術(shù)和產(chǎn)品。Bellus 3D 是最早采用“ active stereo”（主動(dòng)式立體）深度感測(cè)技術(shù)打造3D面部掃描相機(jī)的企業(yè)，通過(guò)將 Bellus3D Face Camera Pro與智能手機(jī)或平板電腦連接就可以檢測(cè)人臉上的50萬(wàn)個(gè)3D點(diǎn)，在幾秒鐘內(nèi)創(chuàng)建出高分辨率和高精確度的面部模型，同時(shí)掃描后的面部模型可以進(jìn)一步應(yīng)用于人臉的識(shí)別、分析和動(dòng)畫制作。

Bellus3D研發(fā)的3D面部掃描相機(jī)

作為最先一批探索3D視覺(jué)技術(shù)的華人，Eric Chen 認(rèn)為，移動(dòng)端3D人臉掃描攝像機(jī)市場(chǎng)近年將迸發(fā)強(qiáng)大的市場(chǎng)潛力，而做好3D感知和人臉識(shí)別技術(shù)的創(chuàng)新結(jié)合將成為發(fā)展關(guān)鍵。

所以，當(dāng)曠視聯(lián)系到Bellus3D時(shí)，雙方幾乎是一拍即合。

同時(shí)，曠視的聯(lián)合創(chuàng)始人兼CEO印奇，本身也有一段“軟硬結(jié)合”的經(jīng)歷，他是先學(xué)的軟件，博士又學(xué)了硬件，深知產(chǎn)業(yè)鏈上下游整合的重要性。奧地利芯片商艾邁斯（AMS）是蘋果Face ID的芯片提供商之一，這次曠視3D視覺(jué)的朋友圈里，也出現(xiàn)了AMS的身影。

左起依次為，曠視科技Face++高級(jí)副總裁吳文昊、Bellus 3D聯(lián)合創(chuàng)始人兼 CEO Eric Chen、艾邁斯半導(dǎo)體大中華區(qū)銷售和市場(chǎng)副總裁陳平路、Altizure的聯(lián)合創(chuàng)始人兼 CEO 方天、疊境數(shù)字科技聯(lián)合創(chuàng)始人兼 CEO 洪煦。

因此，對(duì)標(biāo)蘋果，打造軟硬件一提的3D視覺(jué)解決方案，曠視絕對(duì)不是喊喊口號(hào)而已。

中國(guó)是如今全球最大的智能手機(jī)市場(chǎng)，在這里完全有可能誕生下一個(gè)蘋果，當(dāng)年余承東舉著華為Mate10介紹麒麟970芯片里的NPU好讓人揚(yáng)眉吐氣。在3D視覺(jué)的賽跑中，誰(shuí)能成為NPU乃至整個(gè)芯片的提供者，則是以曠視為代表的計(jì)算機(jī)視覺(jué)公司，最大的看點(diǎn)之一。