0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

新版本ARKit對(duì)利用iPhone X前置結(jié)構(gòu)光攝像頭進(jìn)行眼動(dòng)追蹤的支持

0wvm_ARchan_TT ? 來(lái)源:未知 ? 作者:李倩 ? 2018-07-02 15:05 ? 次閱讀

在ARKit 2.0發(fā)布之后不久,不少開(kāi)發(fā)者發(fā)現(xiàn)了新版本ARKit對(duì)利用iPhone X前置結(jié)構(gòu)光攝像頭進(jìn)行眼動(dòng)追蹤的支持。

類(lèi)似的功能我們?cè)谶^(guò)去也見(jiàn)識(shí)過(guò)(不會(huì)寫(xiě)程序怎么當(dāng)好藝術(shù)家?跳出iPhone X屏幕的3D立體視覺(jué)效果)

該藝術(shù)效果的開(kāi)發(fā)者就是利用了前置景深攝像頭獲取眼球位置,根據(jù)位置實(shí)時(shí)改變動(dòng)畫(huà)呈現(xiàn)角度。

但嚴(yán)格意義來(lái)說(shuō),這并不算是眼動(dòng)追蹤,只是對(duì)眼球位置的識(shí)別,換言之如果頭部和手機(jī)的相對(duì)位置不改變,眼球轉(zhuǎn)動(dòng)時(shí)畫(huà)面不發(fā)生變化。

而ARKit 2下眼動(dòng)追蹤的效果效果就非常驚艷了

轉(zhuǎn)動(dòng)眼睛,屏幕中的十字光標(biāo)便會(huì)隨著注視點(diǎn)的移動(dòng)而移動(dòng),響應(yīng)速度和精確度都很不錯(cuò)

通過(guò)眨眼睛(忍不住想眨眼了怎么辦,會(huì)不會(huì)誤觸)完成點(diǎn)擊選擇,操縱手機(jī)全程不需要?jiǎng)邮?,在很多?chǎng)景中可以說(shuō)是非常方便了。得益于紅外方案,即便是在黑暗中也能實(shí)現(xiàn)眼動(dòng)追蹤。

手機(jī)眼球追蹤

用眼動(dòng)追蹤來(lái)控制手機(jī),是不少開(kāi)發(fā)者一直以來(lái)都在設(shè)想的。

去年年初發(fā)布的ZTE Hawkeye加入的眼球追蹤利用前置攝像機(jī)檢測(cè)用戶的虹膜運(yùn)動(dòng),上下或左右滑動(dòng)控制屏幕。

滑動(dòng)的功能能方便人們?cè)谑稚蠜](méi)空的情況下簡(jiǎn)單的操作手機(jī),但是對(duì)于一些使用群體(肢體殘障)來(lái)說(shuō),他們渴望功能更加強(qiáng)大的眼動(dòng)追蹤方案。

一般而言,有兩種跟蹤眼球的方案,即普通攝像頭和紅外攝像頭。

普通攝像頭方便小型化,低成本但是精度低,紅外方案體積大,造價(jià)高,同時(shí)精度高。

但隨著技術(shù)的發(fā)展,優(yōu)缺點(diǎn)不能一刀切,針對(duì)普通攝像頭方案,2016年麻省理工開(kāi)設(shè)的“Eye tracking for everyone”就利用了卷積神經(jīng)網(wǎng)絡(luò)(CNN)預(yù)測(cè)用戶對(duì)手機(jī)或者平板的注視位置,只使用普通攝像機(jī)的情況下讓精度變?yōu)?.34cm到2.12cm。

盡管精度上有所提高,但從目前的市場(chǎng)情況可見(jiàn)雖然該技術(shù)還并沒(méi)有成熟。

紅外攝像頭則一直都是主流的眼動(dòng)追蹤識(shí)別方案

例如Tobii眼動(dòng)儀采用的技術(shù)就是通過(guò)識(shí)別用戶眼球上角膜、瞳孔產(chǎn)生的反射圖像,使用兩個(gè)圖像傳感器分別采集眼睛與反射圖像,通過(guò)圖像處理算法和一個(gè)三維眼球模型精確地計(jì)算出眼球、注視點(diǎn)在空間中的具體位置。

解決了小型化問(wèn)題的True-Depth相機(jī)模組是否也采用了相似地技術(shù)原理呢?

6月20日,開(kāi)發(fā)者Andrew Zimmer在Twitter發(fā)布了一個(gè)demo,展示ARKit 2對(duì)眼睛注視點(diǎn)位置的實(shí)時(shí)追蹤效果,隨著Andrew眼球的轉(zhuǎn)動(dòng),注視點(diǎn)點(diǎn)的移動(dòng)在屏幕上畫(huà)出一條連貫的曲線。在圖中,顏色越暖(橘色、紅色),代表注視時(shí)間越長(zhǎng)。注視點(diǎn)位置的檢測(cè)精確,識(shí)別軌跡流暢連貫,在未來(lái)的人機(jī)交互中潛力巨大。

有相當(dāng)數(shù)量的患者由于操作不便,與信息時(shí)代脫節(jié)。其中有不少唯一與設(shè)備相互動(dòng)的渠道就是眼睛,眼球追蹤加入智能手機(jī)的交互模式同樣也能造福健全人,讓我們?cè)谑稚蠜](méi)空的情況下操作手機(jī)比如做飯看菜譜、開(kāi)車(chē)看導(dǎo)航。

不過(guò)同時(shí),技術(shù)也帶來(lái)了很大的隱私問(wèn)題。相信大家都有同感,在網(wǎng)上瀏覽過(guò)某一類(lèi)商品之后,pc和手機(jī)app的各種廣告和彈窗中會(huì)根據(jù)你的瀏覽內(nèi)容推薦一堆類(lèi)似商品。當(dāng)未來(lái)的APP知道了你因?yàn)楦信d趣而長(zhǎng)時(shí)間注視的內(nèi)容,內(nèi)容推送會(huì)更加精確,人們的注視內(nèi)容信息會(huì)被拿去販賣(mài),更無(wú)隱私可言了。

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • iPhone
    +關(guān)注

    關(guān)注

    28

    文章

    13474

    瀏覽量

    202122
  • 攝像頭
    +關(guān)注

    關(guān)注

    60

    文章

    4857

    瀏覽量

    96039
  • 結(jié)構(gòu)光
    +關(guān)注

    關(guān)注

    0

    文章

    74

    瀏覽量

    13257

原文標(biāo)題:ARKit 2眼動(dòng)追蹤,人機(jī)交互新模式

文章出處:【微信號(hào):ARchan_TT,微信公眾號(hào):AR醬】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    蘋(píng)果iPhone 14系列攝像頭內(nèi)部拆解

    蘋(píng)果在基準(zhǔn)型號(hào) iPhone 14 上推出了升級(jí)的主后置攝像頭,在 iPhone 14 Pro/Max 上推出了改進(jìn)的前置攝像頭模塊,當(dāng)然還
    發(fā)表于 09-20 10:33 ?6247次閱讀
    蘋(píng)果<b class='flag-5'>iPhone</b> 14系列<b class='flag-5'>攝像頭</b>內(nèi)部拆解

    請(qǐng)問(wèn)有iPhone X的原深感攝像頭相關(guān)元器件的數(shù)據(jù)參數(shù)嗎?

    face ID問(wèn)題,想知道iPhone X的原深感攝像頭相關(guān)元器件的數(shù)據(jù)參數(shù)。
    發(fā)表于 02-26 10:42

    動(dòng)追蹤能提供全新人機(jī)互動(dòng)體驗(yàn)

    強(qiáng)大的電腦芯片、高效的紅外LED以及新型的攝像傳感器,讓先前復(fù)雜的動(dòng)追蹤系統(tǒng)如今能夠適應(yīng)消費(fèi)類(lèi)電子應(yīng)用的各種需要。借助這些系統(tǒng),電子設(shè)備可以檢測(cè)用戶的眼球運(yùn)動(dòng),從而識(shí)別用戶的下一步意
    發(fā)表于 05-18 08:30

    回收vivo攝像頭高價(jià)收購(gòu)vivo攝像頭

    !帝歐現(xiàn)金緊急求購(gòu)vivo手機(jī)全新攝像頭!深圳龍華高價(jià)回收vivo手機(jī)高清攝像頭,現(xiàn)緊急求購(gòu)vivo各型號(hào)手機(jī)后置攝像頭前置攝像頭!帝歐電
    發(fā)表于 04-21 17:16

    什么是動(dòng)追蹤?動(dòng)追蹤如何運(yùn)作?

    什么是動(dòng)追蹤?動(dòng)追蹤如何運(yùn)作?
    發(fā)表于 06-17 06:11

    iPhone X攝像頭+AR、顯示屏和Face ID成產(chǎn)品主要賣(mài)點(diǎn)

    消費(fèi)者信心分析(CSA)服務(wù)近日發(fā)布了一份新報(bào)告,題為“早期買(mǎi)家信心:iPhone X消費(fèi)者對(duì)手機(jī)的攝像頭、顯示屏和Face ID信心十足”,該報(bào)告對(duì)主要在線零售商上的蘋(píng)果iPhone
    的頭像 發(fā)表于 12-29 09:12 ?4437次閱讀

    丘鈦包攬OPPO Find X全隱藏式3D攝像頭模組

    但是機(jī)身沒(méi)有開(kāi)孔,怎么解鎖?在Find X上,更方便更安全的解鎖就是面部識(shí)別,OPPO稱(chēng)其為O—Face。該款機(jī)型搭載了全隱藏式3D攝像頭,前置攝像頭模組包含了3D
    的頭像 發(fā)表于 06-21 18:17 ?6208次閱讀

    TDA2x前置攝像頭同運(yùn)行的全景可視系統(tǒng)

    在TDA2x上同時(shí)運(yùn)行帶有前置攝像頭分析的全景可視系統(tǒng)
    的頭像 發(fā)表于 08-22 00:34 ?2882次閱讀

    Oculus獲新專(zhuān)利 能實(shí)現(xiàn)更精確的動(dòng)追蹤功能

    Oculus公司獲得了一項(xiàng)動(dòng)追蹤技術(shù)新專(zhuān)利,他們或?qū)⒃?b class='flag-5'>頭顯上安裝場(chǎng)攝像頭,從而實(shí)現(xiàn)更精確的
    發(fā)表于 11-12 11:18 ?1599次閱讀

    vivo X27 Pro前置攝像頭采用雙邊了滑軌升降結(jié)構(gòu)并新增了NFC功能

    前置升降攝像頭的設(shè)計(jì)也發(fā)生了部分改變,前置攝像頭采用雙邊滑軌升降結(jié)構(gòu),升起行程縮短至0.62秒,占用的體積也比
    發(fā)表于 04-30 08:46 ?4009次閱讀

    SteamVR獲新版本更新 已全面支持OculusRiftSVR

    SteamVR平臺(tái)迎來(lái)新版本更新,宣布現(xiàn)在已經(jīng)全面支持最近發(fā)布的Oculus Rift S VR顯,此外該版本還修復(fù)了“眾多穩(wěn)定性問(wèn)題和錯(cuò)誤”。
    發(fā)表于 06-18 16:31 ?1966次閱讀

    realme正式推出了realme X新版本升級(jí)了8GB+256GB超大存儲(chǔ)組合

    realme X新版本升級(jí)了8GB+256GB超大存儲(chǔ)組合,其他配置方面保持不變。正面依然搭載6.53英寸三星AMOLED屏幕,屏占比高達(dá)91.2%,前置1600萬(wàn)像素升降攝像頭,后
    發(fā)表于 08-12 11:53 ?1795次閱讀

    OpenVINO? 2022.2新版本有哪些亮的新特性

    金秋已至。伴著涼爽的秋風(fēng)一起到來(lái)的,還有 OpenVINO 工具套件剛剛推出的最新版本 OpenVINO 2022.2。除了能支持英特爾今年新推出的一系列獨(dú)立顯卡進(jìn)行 AI 模型的推理加速及部署外,2022.2的
    的頭像 發(fā)表于 10-09 09:13 ?1746次閱讀

    網(wǎng)絡(luò)攝像頭動(dòng)追蹤則的優(yōu)勢(shì)

    . 首先, 網(wǎng)絡(luò)攝像頭動(dòng)追蹤基本上意味著從"一般" 相機(jī)獲取動(dòng)
    的頭像 發(fā)表于 11-03 12:03 ?1143次閱讀

    NVIDIA多攝像頭追蹤工作流的應(yīng)用架構(gòu)

    為提高安全性并優(yōu)化運(yùn)營(yíng),倉(cāng)庫(kù)、工廠、體育場(chǎng)、機(jī)場(chǎng)等大型區(qū)域通常會(huì)有數(shù)百個(gè)攝像頭進(jìn)行監(jiān)控。多攝像頭追蹤指的是通過(guò)這些攝像頭
    的頭像 發(fā)表于 09-06 14:23 ?377次閱讀
    NVIDIA多<b class='flag-5'>攝像頭</b><b class='flag-5'>追蹤</b>工作流的應(yīng)用架構(gòu)