0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

視覺感知突破性光學(xué)傳感器模仿人類視網(wǎng)膜,有望帶來 AI 重大進(jìn)展

工程師鄧生 ? 來源:雷鋒網(wǎng) ? 作者:付靜 ? 2020-12-13 10:12 ? 次閱讀

視覺、聽覺、嗅覺、味覺、觸覺是人類最基本的五種感覺,其中視覺極為關(guān)鍵,畢竟隨著物種進(jìn)化,眼睛作為人類最為精細(xì)、復(fù)雜的器官,感知能力無與倫比。

曾有神經(jīng)科學(xué)、認(rèn)知心理學(xué)研究表明,80% 以上的外界信息都是通過視覺進(jìn)入了我們的大腦。

技術(shù)代代革新之下,仿人眼的嘗試不斷涌現(xiàn)。

2015 年,美國明尼蘇達(dá)州一位名為 Allen Zderad 的 68 歲男子在失明 10 年之后,憑借一雙 “仿生眼”重見光明。

2020 年 5 月,香港科技大學(xué)范智勇團(tuán)隊聯(lián)合加州大學(xué)伯克利分校、美國勞倫斯伯克利國家實驗室的一組研究人員,就視網(wǎng)膜問題提出了最新方案,甚至打造出了多項性能超越人眼的仿生眼。

而就在近日,美國公立研究型大學(xué)俄勒岡州立大學(xué)(Oregon State University)在光學(xué)傳感器領(lǐng)域有了重大進(jìn)展,更接近于人眼感知視野變化能力的傳感器終于來了。

俄勒岡州立大學(xué)表示:

該傳感器是圖像識別、機(jī)器人人工智能等領(lǐng)域的重大突破,突破性的仿人眼光學(xué)傳感器是人工智能發(fā)展的關(guān)鍵一步。

打造新型視網(wǎng)膜傳感器

2020 年 12 月 8 日,相關(guān)研究成果正式發(fā)表于《應(yīng)用物理快報》,題為 A perovskite retinomorphic sensor(一種鈣鈦礦型視網(wǎng)膜傳感器),論文作者為俄勒岡州立大學(xué)工程學(xué)院研究員、電氣與計算機(jī)工程助理教授 John Labram 和研究生 Cinthya Trujillo Herrera。

哪怕最先進(jìn)的超級計算機(jī),復(fù)雜程度也無法與人腦相媲美。

最早,基于這一事實,神經(jīng)形態(tài)計算領(lǐng)域的研究開始興起,其設(shè)計目的是在執(zhí)行機(jī)器學(xué)習(xí)任務(wù)時優(yōu)于傳統(tǒng)計算機(jī),原理可以簡要概括為一句話:將人腦(的一些方面)復(fù)制到硬件中。

論文介紹,雖然近年來這一領(lǐng)域取得了很大的進(jìn)展,但幾乎所有提供給神經(jīng)形態(tài)處理器的輸入信號仍然是為傳統(tǒng)的 von Neumann 計算機(jī)體系結(jié)構(gòu)設(shè)計的。

研究團(tuán)隊設(shè)計了一個簡單的光敏電容器,并描述了它對光刺激的反應(yīng)。

如下圖 a 所示,該結(jié)構(gòu)基于雙層電介質(zhì):

底部為二氧化硅:二氧化硅高度絕緣,并且對光基本上沒有反應(yīng)。

頂部為鈣鈦礦:即甲基銨碘化鉛(MAPbI3),這是一種具有大光電導(dǎo)響應(yīng)的化合物,在光照下介電常數(shù)有顯著變化,是電介質(zhì)的理想候選材料,在光照下可以改變電容。

電極方面:

底部電極是高摻雜的硅,用作襯底。

頂部電極是 15nm 的、通過熱蒸發(fā)沉積的金,被設(shè)計得足夠薄,即便接觸電阻很大,在導(dǎo)電時能對光照半透明。

John Labram 表示:

以前嘗試制造仿人眼設(shè)備(視網(wǎng)膜視覺傳感器)都是依靠軟件或較為復(fù)雜的硬件。但我們設(shè)計的這種新型傳感器,其操作包括在基礎(chǔ)設(shè)計中,涉及了鈣鈦礦半導(dǎo)體的超薄層。當(dāng)置于光下時,鈣鈦礦會從堅固的電絕緣體變?yōu)閷?dǎo)體,它具有發(fā)展太陽能的潛力,近年來對于鈣鈦礦,學(xué)界也有著廣泛的研究。

基于上述結(jié)構(gòu),當(dāng)與外部電阻器串聯(lián)時,電阻器兩端的電壓降(又稱電位差)將在電容器充電 / 放電時暫時出現(xiàn)尖峰,然后恢復(fù)到其平衡值。也就是說,傳感器會在照度變化時出現(xiàn)尖峰,在其他時候輸出零電壓(如上圖 d 所示)。

研究團(tuán)隊設(shè)計的光敏電容器在設(shè)計和預(yù)期的用途上,都與別的科學(xué)團(tuán)隊以前研制的光電電容器不同——光電電容器被設(shè)計用來儲存來自太陽輻射的能量,而上述傳感器被設(shè)計用來檢測神經(jīng)形態(tài)計算中光學(xué)刺激的變化。

模仿人眼感知更加逼真

那么上述傳感器實際的仿人眼效果如何呢?

首先,研究人員通過播放視頻作為施加給傳感器的光學(xué)刺激,模擬大型陣列。

結(jié)果表明:

對應(yīng)視頻的靜止部分,傳感器輸出了較暗的視頻;

對應(yīng)視頻的移動部分,傳感器則輸出了較亮的視頻。

在沒有光照的情況下緩慢移動時,傳感器輸出的較亮區(qū)域存在 “鬼影”效應(yīng)。

可見,傳感器對于動態(tài)圖像有著很明顯的反應(yīng)。

隨后,研究人員向傳感器施加了以特定角度排列的光刺激,作為另一種檢驗。

這一實驗受到了 20 世紀(jì) 50、60 年代一項發(fā)現(xiàn)的啟發(fā)——科學(xué)家們注意到貓的某些神經(jīng)元對以特定角度排列的光刺激有強(qiáng)烈的反應(yīng)??茖W(xué)家們認(rèn)為,這是視網(wǎng)膜中一些細(xì)胞的特定排列導(dǎo)致了超極化、去極化,它們對光學(xué)刺激會產(chǎn)生反應(yīng)。

因此,研究人員選擇測量兩個值:電容器兩端的電壓降(C 傳感器)和電阻器兩端的電壓降(R 傳感器)。

結(jié)果如上圖所示,這種傳感器的確會對某個方向的刺激做出更強(qiáng)烈的反應(yīng)。

上述兩項實驗表明,這一傳感器的人眼感知模仿能力的確較強(qiáng)。

不僅如此,研究人員還認(rèn)為,由于這是一種傳感器,它不需要任何復(fù)雜的讀出算法或后處理,它可直接輸出電壓,電壓取決于傳感器所瞄準(zhǔn)的物體的方向。

John Labram 表示:

新型傳感器將與神經(jīng)形態(tài)計算機(jī)完美匹配,將為下一代人工智能的應(yīng)用提供動力,如自動駕駛汽車、機(jī)器人技術(shù)和先進(jìn)的圖像識別。

責(zé)任編輯:PSY

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    31294

    瀏覽量

    269654
  • 光學(xué)傳感器
    +關(guān)注

    關(guān)注

    8

    文章

    225

    瀏覽量

    60480
  • 視網(wǎng)膜
    +關(guān)注

    關(guān)注

    0

    文章

    34

    瀏覽量

    12796
  • 視覺感知
    +關(guān)注

    關(guān)注

    0

    文章

    44

    瀏覽量

    3204
收藏 人收藏

    評論

    相關(guān)推薦

    腦機(jī)接口重大進(jìn)展,AI模仿讓患者發(fā)聲!上游芯片技術(shù)也在不斷研發(fā)

    電子發(fā)燒友網(wǎng)報道(文/李彎彎)近日,腦機(jī)接口技術(shù)又取得重大進(jìn)展,美國加州大學(xué)戴維斯分校健康中心開發(fā)出一款新型腦機(jī)接口(BCI),可將腦信號轉(zhuǎn)化為語音,準(zhǔn)確率高達(dá)97%。該團(tuán)隊在一名因肌萎縮側(cè)索硬化癥
    的頭像 發(fā)表于 08-17 00:03 ?7385次閱讀
    腦機(jī)接口<b class='flag-5'>重大進(jìn)展</b>,<b class='flag-5'>AI</b><b class='flag-5'>模仿</b>讓患者發(fā)聲!上游芯片技術(shù)也在不斷研發(fā)

    中科創(chuàng)達(dá)旗下MM Solutions推出突破性視頻降噪算法

    在CES 2025上,中科創(chuàng)達(dá)旗下全球領(lǐng)先的移動和工業(yè)圖形圖像視覺技術(shù)公司MM Solutions重磅推出一款具有突破性的視頻降噪算法——MMS AI Video Denoiser。這款由先進(jìn)
    的頭像 發(fā)表于 01-13 11:41 ?205次閱讀

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗】2.具身智能機(jī)器人的基礎(chǔ)模塊

    目前高速發(fā)展的大模型能給具身智能帶來一些突破性進(jìn)展。 對于感知系統(tǒng),要做的主要任務(wù)是物體檢測,語義分割,立體視覺,鳥瞰視角
    發(fā)表于 01-04 19:22

    AI引領(lǐng)智能產(chǎn)業(yè)崛起,MEMS傳感器迎來風(fēng)口

    電子機(jī)械系統(tǒng))傳感器作為數(shù)字時代的感知層,正迎來前所未有的發(fā)展機(jī)遇。隨著AI技術(shù)的不斷成熟和元宇宙概念的興起,MEMS傳感器作為人機(jī)交互的關(guān)鍵技術(shù),正站在智能產(chǎn)業(yè)崛起的風(fēng)口浪尖上。
    的頭像 發(fā)表于 11-26 17:01 ?431次閱讀

    全新NVIDIA NIM微服務(wù)實現(xiàn)突破性進(jìn)展

    全新 NVIDIA NIM 微服務(wù)實現(xiàn)突破性進(jìn)展,可助力氣象技術(shù)公司開發(fā)和部署 AI 模型,實現(xiàn)對降雪、結(jié)冰和冰雹的預(yù)測。
    的頭像 發(fā)表于 11-21 10:07 ?266次閱讀

    一文講透人形機(jī)器人常用的四類感知傳感器視覺、力/力矩、觸覺、IMU

    隨著科技的飛速發(fā)展,人形機(jī)器人正逐步從科幻電影走進(jìn)現(xiàn)實生活,成為未來智能社會的重要組成部分。它們不僅能夠執(zhí)行復(fù)雜的任務(wù),還能與人類進(jìn)行自然交互,這一切都離不開先進(jìn)的傳感器技術(shù)。在人形機(jī)器人的感知系統(tǒng)
    的頭像 發(fā)表于 11-14 16:44 ?1329次閱讀
    一文講透人形機(jī)器人常用的四類<b class='flag-5'>感知</b><b class='flag-5'>傳感器</b>:<b class='flag-5'>視覺</b>、力/力矩、觸覺、IMU

    Anthropic在人工智能領(lǐng)域取得重大突破

     10月23日消息,美國當(dāng)?shù)貢r間周二,人工智能初創(chuàng)企業(yè)Anthropic宣布了一項重大進(jìn)展。這家由前OpenAI高管創(chuàng)立并獲得亞馬遜支持的公司,在人工智能領(lǐng)域取得了新的突破,其研發(fā)的AI智能體已經(jīng)具備了與
    的頭像 發(fā)表于 10-23 14:56 ?495次閱讀

    傳感器:人形機(jī)器人感知核心(附報告全文)

    在人形機(jī)器人中較為重要的幾種傳感器有力矩傳感器、觸覺傳感器、IMU、視覺傳感器等。 六維力傳感器
    的頭像 發(fā)表于 08-27 16:45 ?1343次閱讀
    <b class='flag-5'>傳感器</b>:人形機(jī)器人<b class='flag-5'>感知</b>核心(附報告全文)

    為空間受限的應(yīng)用提供突破性的動力

    電子發(fā)燒友網(wǎng)站提供《為空間受限的應(yīng)用提供突破性的動力.pdf》資料免費下載
    發(fā)表于 08-26 14:28 ?0次下載
    為空間受限的應(yīng)用提供<b class='flag-5'>突破性</b>的動力

    人形機(jī)器人感知系統(tǒng)的特點:多模態(tài)感知、高精度、實時

    優(yōu)必選、小米科技、宇樹科技等。 ? 人形機(jī)器人感知系統(tǒng)包括哪些傳感器和算法 ? 人形機(jī)器人感知系統(tǒng)包括各種傳感器,如視覺
    的頭像 發(fā)表于 07-30 01:05 ?4500次閱讀

    清華類腦視覺芯片取得重大突破,“天眸芯”登上Nature封面

    ,突破了傳統(tǒng)視覺感知芯片在穩(wěn)定性和安全等方面的性能瓶頸。 ? 天眸芯:受人類視覺系統(tǒng)啟發(fā)的互補(bǔ)
    的頭像 發(fā)表于 06-01 00:54 ?4805次閱讀
    清華類腦<b class='flag-5'>視覺</b>芯片取得<b class='flag-5'>重大突破</b>,“天眸芯”登上Nature封面

    未來已來,多傳感器融合感知是自動駕駛破局的關(guān)鍵

    巨大的進(jìn)展;自動駕駛開始摒棄手動編碼規(guī)則和機(jī)器學(xué)習(xí)模型的方法,轉(zhuǎn)向全面采用端到端的神經(jīng)網(wǎng)絡(luò)AI系統(tǒng),它能模仿學(xué)習(xí)人類司機(jī)的駕駛,遇到場景直接輸入傳感
    發(fā)表于 04-11 10:26

    基于計算設(shè)計的超魯棒應(yīng)變傳感器,實現(xiàn)軟體機(jī)器人的感知和自主

    柔性應(yīng)變傳感器對軟體機(jī)器人的感知和自主至關(guān)重要。然而,它們的可變形體和動態(tài)驅(qū)動在預(yù)測傳感器制造和長期魯棒方面
    的頭像 發(fā)表于 03-07 09:50 ?921次閱讀
    基于計算設(shè)計的超魯棒<b class='flag-5'>性</b>應(yīng)變<b class='flag-5'>傳感器</b>,實現(xiàn)軟體機(jī)器人的<b class='flag-5'>感知</b>和自主<b class='flag-5'>性</b>

    泰凌微電子、谷歌與和眾科技的Matter聯(lián)合項目取得重大進(jìn)展

    近日,Telink(泰凌微電子)、Google(谷歌)、HooRii Technology(和眾科技)共同參與的Matter聯(lián)合項目宣布取得重大進(jìn)展。在單臺MatterOTBR設(shè)備下,成功掛載了超過100臺Matter over Thread設(shè)備,這一數(shù)字相較于之前的限制有了巨大的提升。
    的頭像 發(fā)表于 02-26 09:27 ?962次閱讀

    Zinn Labs 推出基于 PROPHESEE事件視覺傳感器的視線跟蹤系統(tǒng),為 AI 智能鏡框和 VR/MR 系統(tǒng)賦能

    結(jié)合 ?Prophesee 超低功耗、低延遲的事件視覺傳感器, 該款突破性的 視線 跟蹤系統(tǒng)將 助力 帶來直觀、無縫 流暢 的 新 用戶體驗 ? Zinn Labs 宣布推出業(yè)內(nèi)首款基
    的頭像 發(fā)表于 02-07 13:53 ?694次閱讀
    Zinn Labs 推出基于 PROPHESEE事件<b class='flag-5'>視覺</b><b class='flag-5'>傳感器</b>的視線跟蹤系統(tǒng),為 <b class='flag-5'>AI</b> 智能鏡框和 VR/MR 系統(tǒng)賦能