蘋果的AR殺手級(jí)設(shè)備：iPhone

11 月 22 日，很多傳言宣稱，在不久的將來(lái)，蘋果將推出一款增強(qiáng)現(xiàn)實(shí)（AR）或混合現(xiàn)實(shí)（MR）設(shè)備。盡管蘋果還沒(méi)有詳細(xì)討論過(guò)這款設(shè)備，但 AR 功能在 iPhone 上已經(jīng)變得十分活躍，而且正在迅速變得越來(lái)越好。

蘋果從 2017 年開(kāi)始了 AR 之旅，憑借虛擬宜家家具和外觀逼真的戶外 Pokemon Go 大戰(zhàn)引起轟動(dòng)。今年，美國(guó)資深科技編輯斯科特 ? 斯泰恩 （Scott Stein）利用蘋果新款 iPhone 12 Pro 掃描消防栓、繪制其住宅的內(nèi)部地圖，并在屋內(nèi)地板上導(dǎo)航如何渡過(guò)熔巖河。在許多方面，蘋果最新款 iPhone 和 iPad 上的深度傳感激光雷達(dá)傳感器，憑借其先進(jìn)的 3D 掃描功能，正成為未來(lái)蘋果 AR 設(shè)備的支柱。

Facebook、微軟和 Magic Leap 已經(jīng)在探索旨在融合虛擬和現(xiàn)實(shí)的護(hù)目鏡和眼鏡，未來(lái)將有更多使用高通芯片的 VR 設(shè)備問(wèn)世。但蘋果 AR 主管邁克 · 羅克韋爾 （Mike Rockwell）和 AR 高級(jí)產(chǎn)品經(jīng)理阿莉珊德拉 · 麥金尼斯 （Alless Andra McGinnis）表示，蘋果目前的 AR 使命是讓人們口袋里已有的設(shè)備更好地運(yùn)行。從長(zhǎng)遠(yuǎn)來(lái)看，將 AR 與真實(shí)世界的位置分層，自動(dòng)彈出體驗(yàn)，同時(shí)基于 AR 的能力開(kāi)發(fā)創(chuàng)意工具和開(kāi)發(fā)輔助技術(shù)，可能成為最大的殺手級(jí)應(yīng)用。

羅克韋爾說(shuō)：“AR 技術(shù)具有巨大的潛力，可以通過(guò)今天已有的設(shè)備和未來(lái)可能推出的設(shè)備來(lái)幫助人們，但我們必須確保它的成功。對(duì)我們來(lái)說(shuō)，最好的辦法就是塑造我們的設(shè)備生態(tài)系統(tǒng)，讓人們投入自己的時(shí)間和精力，這是個(gè)健康而有利可圖的領(lǐng)域?！绷_克韋爾和麥金尼斯還談到了現(xiàn)在和三年前有什么不同，以及為什么手機(jī)對(duì)未來(lái)如此重要。

蘋果殺手級(jí) AR 應(yīng)用：智能手機(jī)

像 Oculus Quest 2 這樣的虛擬現(xiàn)實(shí)設(shè)備，雖然質(zhì)量不斷提高，但與智能手機(jī)相比，仍然沒(méi)有多少人使用。Moor Insights 高級(jí)消費(fèi)芯片分析師安謝爾 · 薩格（Anshel Sag）表示，除了索尼，沒(méi)有人真正談?wù)?VR 頭盔的銷量。到目前為止，索尼已經(jīng)售出了 500 萬(wàn)臺(tái) PlayStation VR 頭盔，盡管 Oculus Quest 2 很有可能在第一年賣出 500 萬(wàn)至 600 萬(wàn)臺(tái)。但即便如此，這些 VR 頭盔使用的應(yīng)用程序通常會(huì)讓人感覺(jué)與我們?nèi)粘Ｊ褂玫氖謾C(jī)和電腦相去甚遠(yuǎn)。即使在 Magic Leap 和微軟 HoloLens 承諾即將呈現(xiàn) MR 幾年后，AR 設(shè)備仍然沒(méi)有大量存在。

羅克韋爾指出：“對(duì)于那些只使用 VR 技術(shù)，或者想要只使用 AR 技術(shù)體驗(yàn)的開(kāi)發(fā)者來(lái)說(shuō)，這是一條非常艱難的道路。市場(chǎng)上并沒(méi)有那么多設(shè)備可用。但與此同時(shí)，蘋果自 2017 年以來(lái)?yè)碛?AR 功能的 iPhone 和 iPad 數(shù)量高達(dá)數(shù)億部。即使你只吸引了相對(duì)較小比例的用戶，這仍然是個(gè)巨大的數(shù)字?！?/p>

蘋果表示，已經(jīng)有來(lái)自 7000 名開(kāi)發(fā)者提供的 1 萬(wàn)款支持 AR 的 iOS 應(yīng)用程序，其中許多應(yīng)用程序?qū)Ｗ⒂谫?gòu)物或家居裝修，以此作為在家中實(shí)際使用 AR 的一種方式。實(shí)用性正是蘋果目前似乎最看重的。羅克韋爾說(shuō)：“我們想為開(kāi)發(fā)者提供一個(gè)平臺(tái)和生態(tài)系統(tǒng)，他們可以在那里謀生?！?/p>

雖然新冠肺炎疫情已經(jīng)導(dǎo)致許多實(shí)體企業(yè)關(guān)閉，減緩了大多數(shù)人的出行速度，但使用 AR 工具進(jìn)行家居購(gòu)物仍是蘋果目前關(guān)注的主要問(wèn)題。就像谷歌和微軟正在尋求的方法一樣，使用基于手機(jī)的 AR 工具，你可能會(huì)在家里的手機(jī)上以 3D 掃描形式查看你可能想要購(gòu)買的東西。蘋果與 Safari 瀏覽器的連接使彈出式 AR 購(gòu)物看起來(lái)像是去商店購(gòu)物的完美替身。

麥金尼斯援引 Shopify and Build.com 的數(shù)據(jù)指出：“家得寶發(fā)現(xiàn)，人們?cè)?AR 上看到某款產(chǎn)品時(shí)，改用 AR 的可能性是其他人的兩到三倍。購(gòu)買的可能性更大 （94%），回報(bào)率也更低（22%）?！?/p>

包括 Adobe 在內(nèi)的應(yīng)用開(kāi)發(fā)商似乎對(duì)基于手機(jī)的 AR 也持同樣的看法。Adobe 為蘋果 iOS 開(kāi)發(fā)了 AR 創(chuàng)意應(yīng)用 Aero。Adobe AR 主管斯特凡諾 · 科拉扎 （Stefano Corrazza）在談到公司為何除了從 Oculus 收購(gòu) Medium 之外還沒(méi)有探索頭盔創(chuàng)意工具時(shí)說(shuō)：“頭盔已經(jīng)在我們的路線圖上了，它們還沒(méi)有達(dá)到讓我們有理由部署的臨界點(diǎn)。在蘋果或谷歌大規(guī)模推出產(chǎn)品之前，我們推出它沒(méi)有太大意義?！?/p>

與此同時(shí)，像售價(jià) 999 美元的新款 iPhone 12 Pro 這樣的智能手機(jī)可以成為主要的創(chuàng)意工具，為未來(lái)的 AR 設(shè)備添磚加瓦?？评f(shuō)：“即使有了 AR 頭盔，所有的計(jì)算都會(huì)在手機(jī)上進(jìn)行，而且也可以流式傳輸?shù)姆绞竭B接到眼鏡上?！?/p>

這也是高通已經(jīng)在為未來(lái)的 AR/VR 設(shè)備打造的相同模式，但這可能需要數(shù)年時(shí)間。與此同時(shí)，智能手機(jī)將發(fā)揮更大作用?？评谡劦?iPhone 12 Pro 時(shí)說(shuō)：“在一段時(shí)間內(nèi)，它將是主要的消費(fèi)設(shè)備，但也可以 3D 掃描內(nèi)容，它是一臺(tái)非常強(qiáng)大的機(jī)器?！盇dobe 還沒(méi)有在 Aero 上使用 3D 掃描工具，但未來(lái)可能會(huì)探索加入這些功能的方法。

激光雷達(dá)作為創(chuàng)意工具向 AR 領(lǐng)域邁進(jìn)

蘋果進(jìn)軍 AR 領(lǐng)域的第一步，只是使用手機(jī)的運(yùn)動(dòng)傳感器、陀螺儀和內(nèi)置攝像頭來(lái)識(shí)別樓層，然后它識(shí)別墻和人。具備激光雷達(dá)功能的 iPhone 和 iPad 則更進(jìn)一步，從后置攝像頭附近的一個(gè)小黑色圓圈隱形地噴射出一系列紅外激光，可以快速網(wǎng)格化 （以 3D 方式繪制）房間的全景。

這也包括空間中的 3D 掃描對(duì)象和人。這是谷歌多年前通過(guò)一系列深度感應(yīng) Tango 手機(jī)探索的技術(shù)的演變，但技術(shù)更先進(jìn)、范圍更廣泛。許多早期的激光雷達(dá)應(yīng)用，如 Polycam、3D 掃描儀和 Record 3D 都非常有創(chuàng)意，以 3D 捕捉為重點(diǎn)，與 2017 年令人驚嘆的、玩游戲的 AR 應(yīng)用相比，這是一個(gè)巨大的轉(zhuǎn)變。

羅克韋爾說(shuō)：“這就是我們?cè)谠O(shè)備上安裝掃描儀的部分原因。我們覺(jué)得這是一項(xiàng)關(guān)鍵技術(shù)，可以開(kāi)啟 3D 掃描技術(shù)的爆炸式增長(zhǎng)，可以用于各種用途。它還開(kāi)啟了以某種方式開(kāi)始掃描環(huán)境的可能性，并且能夠使創(chuàng)建 3D 對(duì)象變得更容易?！?/p>

互聯(lián)網(wǎng)上最大的 3D 對(duì)象存儲(chǔ)庫(kù)之一 Sketchfab 已經(jīng)看到了增長(zhǎng)，盡管在此之前，它已經(jīng)在 3D 掃描方面進(jìn)行了多年的探索。Sketchfab 的訂戶剛剛達(dá)到 400 萬(wàn)，自 2012 年開(kāi)始提供這項(xiàng)服務(wù)以來(lái)，它迎來(lái)了第一個(gè)盈利月份。

但正如 Sketchfab 首席執(zhí)行官阿爾班 · 德諾伊爾（Alban Denoyel）所說(shuō)的那樣，他已經(jīng)經(jīng)歷了之前自己預(yù)計(jì) 3D 掃描物體會(huì)蓬勃發(fā)展的時(shí)期。2016 年，當(dāng) VR 頭盔和幾款谷歌 3D 掃描 Tango 手機(jī)首次亮相時(shí)，大肆炒作。然而，市場(chǎng)的采用并沒(méi)有發(fā)生，導(dǎo)致了德諾伊爾所說(shuō)的 “VR 冬天”到來(lái)?，F(xiàn)在，這種情況可能開(kāi)始好轉(zhuǎn)了。

Snapchat 已經(jīng)在探索使用激光雷達(dá)實(shí)現(xiàn) AR 效果，可以將虛擬物體放入現(xiàn)實(shí)世界，甚至還進(jìn)行了掃描整個(gè)城市街區(qū)的更大規(guī)模實(shí)驗(yàn)。Snapchat 攝像頭平臺(tái)副總裁埃坦 · 皮利普斯基 （Eitan Pilipski）表示：“我們認(rèn)為深度是非常重要的?！?/p>

不過(guò)，即使有了這些可能性，學(xué)習(xí)使用這些新工具可能也會(huì)令人望而生畏。蘋果自己的 AR 創(chuàng)作工具 Reality Composer 和 Adobe 的 3D AR 創(chuàng)作工具包 Aero，并不一定是人們馬上就能下載的應(yīng)用，甚至是他們回避的應(yīng)用。到目前為止，3D 掃描應(yīng)用很吸引人，但也是實(shí)驗(yàn)性的，而且并不總是直觀的。蘋果在很大程度上將 3D 掃描應(yīng)用程序的世界交到了開(kāi)發(fā)者手中，而蘋果日常的核心 iOS 工具完全沒(méi)有整合這些功能。

蘋果在 iOS 范圍內(nèi)對(duì) 3D 掃描對(duì)象的支持確實(shí)表明，3D 掃描對(duì)象最終可能會(huì)像 PDF 或照片一樣被分享。但在某些方面，未來(lái)的創(chuàng)造性工具還沒(méi)有完全存在。

拍照效果也可能帶來(lái)令人驚嘆的改進(jìn)，蘋果自己的攝像頭應(yīng)用程序使用 iPhone 12 Pro 的激光雷達(dá)來(lái)提高夜間拍照和肖像的對(duì)焦能力。但蘋果目前還沒(méi)有將 AR 技術(shù)集成到攝像頭應(yīng)用中，也不允許進(jìn)行任何 3D 掃描。這些想法留給開(kāi)發(fā)者去探索。有些應(yīng)用程序，如 DSLR Camera，已經(jīng)使用 iPhone 的激光雷達(dá)在照片數(shù)據(jù)上創(chuàng)建自定義的 3D 信息層，將 3D 文本分層到照片中。

DSLR Camera 的創(chuàng)建者弗爾維奧 · ?；鍍?nèi)（Fulvio Scichilone）說(shuō)：“這款應(yīng)用能夠計(jì)算出人和背景物體之間的分割，AR 肖像畫的未來(lái)計(jì)劃是用陀螺儀或手指移動(dòng)畫框?！?/p>

作為擴(kuò)展感官的 AR 以及可訪問(wèn)性工具

蘋果認(rèn)為 AR 的殺手級(jí)應(yīng)用是可發(fā)現(xiàn)性，但在可訪問(wèn)性方面還有另一個(gè)巨大的機(jī)遇。AR 可以擴(kuò)展一個(gè)人的感官。在音頻領(lǐng)域，蘋果已經(jīng)將 AirPods 用作助聽(tīng)器，F(xiàn)acebook 也在探索用于輔助聽(tīng)力的空間音頻技術(shù)。

同樣的情況也可能發(fā)生在輔助視力上。未來(lái)的助視產(chǎn)品，如 Mojo Lens 承諾的增強(qiáng)型隱形眼鏡，正致力于成為對(duì)視力受損的人有用的工具。蘋果可能會(huì)在 iPhone 上的 AR 以及未來(lái)的設(shè)備作為輔助工具的工作方式上走類似的道路。IOS 14.2 中已經(jīng)有了新的人類檢測(cè)功能，它使用蘋果的 AR 和激光雷達(dá)來(lái)識(shí)別人與人之間的距離，并在新款 iPhone 上用它來(lái)輔助視覺(jué)。

這可能只是個(gè)開(kāi)始。羅克韋爾說(shuō)：“我們可以做的事情還有很多，特別是與我們對(duì)周圍環(huán)境的理解有關(guān)。我們可以辨認(rèn)人，但如果你想一想，人類對(duì)環(huán)境的理解程度，沒(méi)有理由不能讓一臺(tái)設(shè)備最終也具備這種程度的理解，并將其提供給開(kāi)發(fā)者?！丙溄鹉崴寡a(bǔ)充說(shuō)：“我們將與盲人和弱視社區(qū)合作，特別是在人類的探測(cè)方面進(jìn)行改進(jìn)?！?/p>

AR 未來(lái)的殺手級(jí)優(yōu)勢(shì)：即時(shí)性

盡管有些人始終在使用 AR，但在日常生活中使用 iPhone 或 iPad 時(shí)，他們經(jīng)常會(huì)忘記尋找新的 AR 應(yīng)用。當(dāng)我們?cè)诂F(xiàn)實(shí)世界中忙碌時(shí)，發(fā)現(xiàn)虛擬世界中的新事物并不是一個(gè)無(wú)縫的過(guò)程。

羅克韋爾認(rèn)為 iPhone AR 的未來(lái)不是應(yīng)用程序，而是快速瀏覽功能。他解釋說(shuō)：“你每天要打開(kāi)手機(jī)多次來(lái)做各種事情，這些都是輕量級(jí)的體驗(yàn)。真正的殺手級(jí)應(yīng)用是，它將一直以這些微妙的方式被定期使用，幫助你做你現(xiàn)在做的事情，讓你的工作變得更容易、更快?！?/p>

實(shí)現(xiàn)這一目標(biāo)的途徑包括 App Clips，這是蘋果在 iOS 14 中推出小型微應(yīng)用的新方式，無(wú)需下載任何東西就能在 iPhone 上運(yùn)行。App Clips 可以由現(xiàn)實(shí)世界中放置的 NFC 標(biāo)簽或可掃描代碼觸發(fā)，它還涉及蘋果的地圖繪制工作。蘋果新推出的 Location Anchors 意味著虛擬 AR 對(duì)象可以存在于現(xiàn)實(shí)生活中的地點(diǎn)，比如在時(shí)代廣場(chǎng)看到一件虛擬藝術(shù)品，并與多人同時(shí)共享。

羅克韋爾在談到 Location Anchors 時(shí)說(shuō)：“如果它位于我們擁有高分辨率地圖的地區(qū)之一，這在美國(guó)是相當(dāng)多的。如果它在一米之內(nèi)，你就可以體驗(yàn)到這一點(diǎn)?！彼兄Z，Location Anchors 的精確度將高于全球定位系統(tǒng) （GPS）。同時(shí)，在現(xiàn)實(shí)世界中，由特定二維碼或 Location Anchors 觸發(fā)的 App Clips 精確度可以達(dá)到厘米級(jí)。

對(duì)于蘋果的 AR 技術(shù)來(lái)說(shuō)，這兩項(xiàng)工作仍在進(jìn)行中：在疫情導(dǎo)致封鎖期間，人們可能不太可能出現(xiàn)這種基于位置的 AR 技術(shù)出現(xiàn)在公共場(chǎng)所、商店或博物館。但蘋果認(rèn)為，對(duì)于每天使用 AR 的人來(lái)說(shuō)，它們是至關(guān)重要的。羅克韋爾說(shuō)：“我們知道我們必須解決這些問(wèn)題，才能讓 AR 成為主流體驗(yàn)，我認(rèn)為我們正處在讓 AR 成為人們?nèi)粘Ｉ钜徊糠值倪吘墶！?/p>

Acute Art 公司首席執(zhí)行官雅各布 · 德蓋爾（Jacob De Geer）說(shuō)：“我的看法是，App Clips 和 Location Anchors 將產(chǎn)生巨大的不同。”Acute Art 是一款已經(jīng)在現(xiàn)實(shí)世界舉辦 AR 展覽的應(yīng)用程序，但目前人們找到這件藝術(shù)品的挑戰(zhàn)之一是需要知道它的存在。德蓋爾稱：“現(xiàn)在的主要問(wèn)題是：你怎么才能讓人們下載你的應(yīng)用呢？這不僅是 AR 領(lǐng)域的問(wèn)題，也是現(xiàn)在所有科技領(lǐng)域的問(wèn)題?！?/p>

麥金尼斯說(shuō)：“我們經(jīng)常聽(tīng)說(shuō)人們?cè)谑褂?AR 應(yīng)用，卻不知道它們是什么?！彼傅氖俏直?· 帕克 （Warby Parker）的即時(shí) AR 眼鏡試戴等流行 iPhone 工具。他稱：“隨著 AR 變得越來(lái)越主流，你是否知道它是 AR 并不重要。重要的是你在你的設(shè)備上有一種令人驚嘆的體驗(yàn)?！?/p>

現(xiàn)在為將來(lái)打好基礎(chǔ)

結(jié)合蘋果基于激光雷達(dá)的 3D 掃描功能，越來(lái)越強(qiáng)大視覺(jué)效果的 AR 工具，再加上 AirPod Pro 引入的空間音頻技術(shù)（可以讓你正在聽(tīng)的東西聽(tīng)起來(lái)就像在 3D 空間中移動(dòng)一樣），不難想象未來(lái)蘋果 AR 頭盔的樣子。

蘋果對(duì)此不予置評(píng)。但與此同時(shí)，該公司正在努力鼓勵(lì)大批開(kāi)發(fā)者開(kāi)發(fā)支持 AR 的應(yīng)用程序。無(wú)論其 AR 設(shè)備是否會(huì)在短期內(nèi)面世，更具空間意識(shí)的 iPhone 和 iPad 都將把手機(jī)轉(zhuǎn)變?yōu)槭澜鐠呙柙O(shè)備?；蛘呱踔量赡苡糜?a href="http://wenjunhu.com/soft/data/42-101/" target="_blank">機(jī)器人技術(shù)，或者在意想不到的地方用作計(jì)算機(jī)視覺(jué)攝像頭。

羅克韋爾說(shuō) ：“這些東西最初是很微妙的，你必須具備所有的元素才能讓它們成功。幾年之后，它將成為一種你會(huì)記不起沒(méi)有它的生活方式，就像互聯(lián)網(wǎng)一樣。你會(huì)覺(jué)得：‘哇，我經(jīng)常用這個(gè)’，它最終將融入我們的生活?！?/p>

責(zé)任編輯：haq